Aus seiner am 6. September 1894 mit Blanche Maude Lee geschlossenen Ehe gingen zwei Töchter und ein Sohn hervor, Charles Swinfen Eady, der nach dem Tod seines Vaters den Titel als 2. Baron Swinfen erbte.