Späteres Leben Holderness Abschied wurde durch die Aussicht auf das Amt des Lord Warden of the Cinque Ports erleichtert, das er im Oktober 1765 zusammen mit einer lebenslangen Pension in Höhe von £ 4000 erhielt.