Die Mitglieder des Ensembles hatten zuvor in Formationen wie den Sepia Nephews, Ben Bernie's Nephews und The Five Cousins gespielt; mit den Eintritt des Gitarristen Teddy Bunn in die Band nannten sie sich Spirits of Rhythm.