Er war der älteste Sohn des Bankiers Christian Wilhelm Lutteroth (* 28. Oktober 1772 in Mühlhausen; † 14. April 1849 in Paris) und seiner Frau Johanna Catharina (Jeanne), geb. Manskopf (* 5. November 1780 in Frankfurt/Main; † 24. März 1866 in Paris).