Колфакс, штат Калифорния, может похвастаться бронзовой статуей Колфакса, она стоит рядом с путями на станции AMTRAK.
Город-призрак Колфакс, штат Колорадо, был назван в его честь. Округ Колфакс, штат Нью-Мексико, также назван в честь спикера.