1940. aastal sai ta komandöriks 2. relvastatud kuurasiirregimendil. Tema rügement püüdis blokeerida Saksamaa välkmängud Belgias, kuid nagu paljud teisedki Prantsuse üksused, oli sunnitud taganema. Kui Prantsusmaa langes natside kätte, valiti Touzet du Vigier, kes teenis nüüd marssal Petaini Vichy režiimi, Versailles'i armee peakorteri ratsaväe osakonna juhiks. Touzet du Vigier tegi aga salaja koostööd Prantsuse vastupanuliikumisega. Tema ülemused, kes ignoreerisid tema salajast tegevust, saatsid ta Mascara, Tuneesia, kus ta võttis üle allüksuse juhtimise. Kui liitlased tungisid Aafrikasse
Touzet du Vigier vahetas pooled De Gaulle'i vabale prantslasele.