ב-9 באוגוסט, הצבא הצרפתי הפסיד שלושה קרבות בשלושת הימים (קרב ויסמבורג, של ספייכרן,
וורת'), ממשלתו של אוליבייה הודח מהכהונה, ואוליבייה חיפש מקלט מהזעם הכללי באיטליה. הוא חזר לצרפת ב-1873, אך למרות שהוא המשיך בקמפיין פעיל באסטאפטה הבונפרטיסטית, כוחו הפוליטי נעלם, ואפילו במפלגתו שלו הוא התנגש ב-1880 עם פול דה קסג'נאק.