Bei den Kongresswahlen des Jahres 1890 wurde Houk dann aber im dritten Wahlbezirk von Ohio in das US-Repräsentantenhaus in Washington, D.C. gewählt, wo er am 4. März 1891 die Nachfolge des Republikaners Elihu S. Williams antrat.