Nach seiner Liaison mit der Schauspielerin Anna Karina heiratete er 1979 die Mobil-Oil-Erbin Suzanna Love, die in seinen amerikanischen Filmen bis zur Trennung 1984 (Scheidung 1987) häufig die Hauptrolle spielte.