Johnson hatte insgesamt vier jüngere Geschwister: einen Bruder namens Sam Houston Johnson (1914–1978) sowie drei Schwestern: Rebekah Johnson Bobbitt (1910–1978), Josefa Johnson White Moss (1912–1961) und Lucia Johnson Alexander (1916–1997).