En octobre 1761, il choisit de rester au gouvernement et accepte le nouveau rôle de chef de la Chambre des communes, ce qui cause un désaccord avec son beau-frère et son allié politique, William Pitt, démissionnaire.
Son frère aîné était Richard Grenville-Temple.