Panama Joe võitis maailma värvilise keskmise kaalu meistrivõistluse Bostoni George Robinsoni käest Madison Square Gardenis
8. oktoobril 1920 kaheteistkümne raundi otsusega. Panama Joe kaalus 151 ja Robinson kaalus 150, kerge keskmise kaaluga. See oli esimene kord, kui kaks musta poksijat ilmusid Garden'i võitluskaardil, kuigi selle ajastu tüüpiline, oli võitluse kajastus lühike neis paaris ajalehes, mis seda kajastavad. Üks allikas kirjeldas lahingut kui julma ja verise.