Il a élevé sept enfants : trois de son premier mariage, ses trois enfants de sa sœur Alice, adoptés par Vonnegut après sa mort du cancer, et un septième, Lily, adopté avec Krementz.
Il adopta une fille du nom de Lily avec Krementz, dont trois étaient les enfants de sa sœur Alice.