Aus dieser zweiten Ehe ging sein Sohn, der Historiker Michael Kazin (* 1948), hervor. 1952 heiratete Alfred Kazin die Autorin und Hochschullehrerin Ann Birstein, die an seiner Publikation The Works of Anne Frank (1959) beteiligt war.