Skryf 'n voortsetting vir hierdie paragraaf - Hierdie sukses is kort daarna gevolg deur 'n donker tydperk in die klub se geskiedenis, toe Milaan twee keer in die vroeë 1980's na Serie B afgedank is. Milaan is in 1980 afgedank
vir sy betrokkenheid by die wedstryd vasmaak skandaal van 1980, en weer nadat hy die derde laaste in die 1981/82 seisoen, nadat hy net teruggekeer het na Serie A die vorige seisoen, nadat hy die 1980/81 Serie B-titel gewen het. Ondanks die feit dat hy 'n lid van die Italiaanse span van die Euro 1980 was wat vierde geëindig het, en die 1982 Wêreldbeker-wenner, het Baresi gekies om by Milaan te bly en die Serie B-titel vir die tweede keer tydens die 1982-1983 seisoen te wen en Milaan terug te bring na Serie A. Nadat Aldo Maldera en Fulvio Collovati die klub in 1982 verlaat het, is Baresi op 22-jarige ouderdom as kaptein van Milaan aangestel en sou hierdie posisie vir 'n groot deel van sy tyd by die klub beklee, en 'n simbool en leier vir die span word. Gedurende hierdie somber tydperk vir Milaan het Baresi daarin geslaag om 'n Mitropa-beker in 1982 te wen en die Coppa Italia-eindstryd in die 1984/85 seisoen te bereik, hoewel die span nie in Serie A kon oorheers nie.