Nach seiner Rückkehr wurde James Green 1856 ein weiteres Mal ins Repräsentantenhaus der Vereinigten Staaten gewählt, doch er verzichtete auf dieses Mandat, da er wenig später auch die Nachwahl um einen vakanten Sitz im US-Senat gewann.