Later, in the 1850s, under President Pierce, he was known to have remarked — probably the only thing he's known for — when a neighbor passed by and said, "I'd love to see the beautiful house," and Pierce said to him, "Why my dear sir, of course you may come in.
Later, in de 1850er jaren, onder President Pierce, stond hij bekend om zijn uitspraak — waarschijnlijk het enige waar hij bekend voor is — toen een buurman langs kwam en zei: "Ik zou graag het mooie huis zien". Pierce zei tegen hem: "Mijn beste mijnheer, natuurlijk mag u binnenkomen.