Louis-Pierre Dufay
Depuis 1778, la France est alliée aux insurgés américains contre le Royaume de Grande-Bretagne et en 1779, pour soutenir militairement les Américains, le vice-amiral Charles Henri d'Estaing embarque à Saint-Domingue des troupes dont fait partie Dufay. L'armée française échoue à reprendre la ville de Savannah. Revenu sur l'île, Dufay démissionne en 1779. Le dans la paroisse de Grande Rivière, il épouse Catherine Thérèse Joly, veuve qui possède une sucrerie, une poterie et une caféterie. Par ce mariage, Dufay rencontre les riches colons propriétaires de sucreries. Bien que tous les biens appartiennent à sa femme, Dufay s'intéresse à la gestion de la sucrerie qui assure un revenu important au couple. 141 esclaves travaillent alors dans la sucrerie. En 1785, il revient en France. En 1788, vivant séparé de son épouse, il est arrêté le mais dès le lendemain il est libéré grâce à la caution d'un ami.
Louis-Pierre Dufay
Louis-Pierre Dufay naît le à Paris. Ses origines sociales sont inconnues car selon les moments et les personnes, les déclarations changent. Il affirme ainsi dans son contrat de mariage que son père est noble, alors qu'en 1794 il explique que celui-ci était bourgeois. Sa vie durant son enfance n'est pas connue mais il est fort probable qu'il a reçu une bonne éducation puisqu'il parlait l'espagnol et savait par cœur des vers de tragiques. Sa mère meurt en 1758. Le , Louis-Pierre, ainsi que sa sœur Suzanne Sophie, sont émancipés. Il est donc affranchi de l'autorité parentale. Après la mort de son père en 1770, il dilapide le peu d'argent laissé par celui-ci et est poursuivi pour dettes. Il réussit à échapper à ses créanciers en partant pour Saint-Domingue en 1778. Là, il change son nom en Dufaÿ de la Tour et s'engage dans l'armée.