Bouvé sündis 27. mail 1878 Hinghamis, Massachusettsi osariigis ja õppis Harvardi kolledžis ja Harvardi õigusteaduses. Enne Registri ametisse asumist töötas ta Manilas USA ringkonnaprokuröri abina, Panama komisjoni
, ja USA agendina üldiste ja eriküsimuste komisjonis Mehhikoga toimuvate piiride arutelude ajal. Ta teenis Esimese maailmasõja ajal Prantsusmaal välirelvas ja okupatsiooniarmees Saksamaal. Ta lahkus Ameerika Ühendriikide armee teenistusest leitnant-koloneli auastmega. 1912. aastal kirjutas Bouvé "A Treatise on the Laws Governing the Exclusion and Expulsion of Aliens in the United States", mida peetakse üheks esimeseks autoriteetseks juriidiliseks teoks sellel teemal.