Grenville fue el segundo hijo de Richard Grenville y Hester Temple (primera condesa de Temple).