ב-1924-1925, לי נפל למקום ה-20 בליגה וניצח ב-9-52 במשחק הליגה בסנטרל פארק ביום חג המולד. בדצמבר 1925 הועבר שחקן הכוכב אייב ג'ונסון לאולדהם תמורת 650 ליש"ט והירידה של לי המשיכה בעונה הבאה כשהם ירדו למקום הרביעי מהשורה התחתונה בליגה. המועדון הפסיד בכל משחק מחוץ לקבוצה וסבל כמה תבוסות כבדות כשהביטחון עזב את הקבוצה. 1926 הייתה השנה של השביתה הכללית
ולי הכניס את הכורים בחינם למשחקים רבים בבית. לייה הייתה עונה הגונה, סיים במקום השביעי בליגה. בתקופה זו שיפרו את רחוב מאת'ר ליין, כולל בניית מרפסת מכוסה בקצה אחד, הכפלת גודל האולם וגשר ברזל נבנה על פני התעלה כדי לתת לצופים גישה קלה יותר ממרכז העיר.