Swinton wurde in die radikale Politik der Arbeitsbewegung involviert, als er im Frühjahr 1874 auf einer Massenversammlung auf dem Tompkins Square in New York City sprach — eine Versammlung, die von der Polizei gewaltsam aufgelöst wurde.