Er entstammte der Adelslinie der Earls of Peterborough – sein Großonkel war Charles Mordaunt, 3. Earl of Peterborough – und kam Anfang 1730 als zweites Kind von Colonel Charles Mordaunt und dessen zweiter Ehefrau Ann Scroope zur Welt.