Na een korte verblijf in het Palazzo Vecchio in de Piazza della Signoria, kochten Hertog Cosimo I en zijn vrouw, Eleonora van Toledo, het paleis in 1549 als officiële residentie van de Medici van de failliete koopman familie Pitti; het werd in de loop der eeuwen aanzienlijk vergroot en versierd.
De officiële residentie van de Medici was vroeger van de familie Pitti.