Napoleon Bonaparte bewertete es jedoch als "eine Verschwendung, einen so fähigen Mann in ein kleines, problemloses Bistum zu versetzen" und bestimmte ihn stattdessen am 10. April 1802 zum Bischof von Le Mans.