Bei den Kongresswahlen des Jahres 1856 wurde Thayer im neunten Wahlbezirk von Massachusetts in das US-Repräsentantenhaus in Washington, D.C. gewählt, wo er am 4. März 1857 die Nachfolge von Alexander De Witt antrat.