Seine zweite Frau, die erst fünfzehn Jahre alte Charlotte Ann „Lemon“ Mills, gebar ihm zuerst einen Sohn Joseph Gendall (geboren am 16. September 1864) und später eine Tochter mit Namen Elena Charlotte (geboren 1867).