1797 жылы ол босатылды және 18 брюмерден кейін Францияға оралды, онда 1814 жылға дейін өмір сүрді, саясатқа қатыспады. Тек 1802 жылы плебисцит кезінде ол Наполеонға хатпен жүгінді, онда авторитарлық режим орнатуға қарсы наразылық білдірді. Бір жүз күндікте Наполеон оған пэр атағын ұсынды, бірақ Лафайет оны қабылдамады. Осы аралықта сайланған Заң шығару корпусында Лафайет Наполеон үкіметінің қатаң оппозициясында болды; оның қалауы сол кезде де Луи-Филипп Орлеанскийдің тағына шақыру болды. Екінші реставрация кезінде ол Өкілдер палатасының өте сол жақ жағына тиесілі болды және абсолютизмнің қайта оралуына қарсы күресті мақсат еткен әртүрлі қоғамдарға қатысты. Баспасөз бостандығы достарының (Траси, Перье, Лафитт және басқалар) ашық құрылған қоғамы құрылғаннан кейін екі жылдан кейін (1821 жылы) жабылды, бірақ оның артында тұрған жасырын әрекет комитеті, оған Лафайет Аржансонмен және басқалар қатысқан, ұзақ өмір сүрді. Роялистердің Герцог Беррийскийді өлтіру ісіне Лафайетті араластыруға тырысуы сәтсіз болды.
Қай жылы Жильбер Наполеонға хатпен жүгінді, онда авторитарлық режим орнатуға наразылық білдірді?
1802 жылы