Отец Эрнеста, Генри, и мать, урожденная Генриетта Летиция София Гаван, имели англо-ирландские корни.
Мать Эрнеста, урожденная Генриетта Летиция София Ганан, вышла замуж за его отца в 1872 году, что внесло немного ирландской крови в англо-ирландскую семью.