שלוש שנים מאוחר יותר, ב-1159, יושיטומו ופוג'יווארה נובויורי הכניסו את גו-שירקאווה למעצר בית והרגו את המשרת שלו, החוקר פוג'יווארה נו מיצ'ינורי, במה שנקרא מרד הייג'י. בסופו של דבר, טאירה נו קיאומורי, בתמיכתו של גו-שירקאווה, הביס את יושיטומו. בעת בריחתו מקיוטו, יושיטומו נאלץ להרוג את בנו טומונגה. מאוחר יותר, יושיטומו נבגד ונרצח באמבטיה שלו. שלושה מבניו, יוריטומו, מינוריטמו נו יושונה ומינוריטמו נו נווריאורי, הושלכו מאוחר יותר ונשלחו על ידי קיאומו. עם זאת, יושיטומו ופוג'יווארה נובויורי הוצאו להורג. קברו במחוז אייצ'יורה מוקף מכל צדדים בחרבות עץ (בוקוטו), כפי שהמילים
חרבות מעץ