Sandwich se retire du service public en 1782 et vit dix ans de plus, meurt le 30 avril 1792. Son titre de comte de Sandwich passe à son fils aîné, John Montagu, 5e comte de Sandwich, qui avait 48 ans à l'époque.
John Montagu, 4e comte de Sandwich, est né le 3 novembre 1718 et est mort le 30 avril 1792 en Grande-Bretagne.