Lorsque Thomas Jefferson emménagea dans la maison en 1801, il -LRB- avec l'architecte Benjamin Henry Latrobe -RRB- agrandit le bâtiment vers l'extérieur, créant deux colonnades destinées à cacher des écuries et des entrepôts.
La construction se poursuit avec l'ajout du South Portico en 1824 et du Nord en 1829.