Xaver Schwarzenberger war 37 Jahre lang mit der Drehbuchautorin Ulrike Schwarzenberger verheiratet, mit der er im Rahmen eines Exklusivvertrags mit dem ORF eine Reihe österreichischer Fernsehfilme produzierte.