Mit dem Anstieg der Nutzung des Hafens von Gloucester sank Mitte des 19. Jahrhunderts jedoch die kommerzielle Bedeutung von Annisquam, sodass die Brücke 12 Jahre nach ihrer Errichtung nicht mehr wirtschaftlich zu betreiben war.