Олдрин был женат трижды: на Джоан Арчер, от которой у него было трое детей, Джеймс, Дженис и Эндрю, на Беверли Зил и на своей нынешней жене Лоис Дриггс Кэннон, на которой он женился в День святого Валентина 1988 года.
Он был женат трижды: на Джоан Арчер, на Беверли Зайл и на своей нынешней жене Лоис Дриггс Кэннон. У него было трое детей от Джоан, которых звали Джеймс, Дженис и Эндрю.