Жа Жа Габор родилась как Шари Габор (Шари - уменьшительное от венгерского имени Сара \ / О / Саролта) в Будапеште (тогда часть Австро-Венгерской империи), средней дочери Вилмоша Габора (1884-1962) , солдат и Джоли Габор (1894 - 1997).
Две ее сестры, Магда и Ева, также были актрисами и светскими львицами.