Nach dem Tod des Abgeordneten Charles Martin wurde Rainey bei der fälligen Nachwahl für den vierten Sitz von Illinois als dessen Nachfolger in das US-Repräsentantenhaus in Washington, D.C. gewählt, wo er am 2. April 1918 sein neues Mandat antrat.