В октябре 1761 года он решил остаться в правительстве и принял новую роль лидера общин, вызвав раскол со своим зятем и политическим союзником Уильямом Питтом, который ушел в отставку.
Его старшим братом был Ричард Гренвилл-Темпл.