Construit pour le héros militaire du Tennessee et septième président des États-Unis Andrew Jackson (1767-1845), The Hermitage fut, à son apogée, une plantation prospère de 485 ha avec des champs de coton, des chevaux d'élevage et d'illustres visiteurs. Personnalité controversée surnommée « Old Hickory » pour sa loyauté sans faille envers ses soldats, Jackson fut élu pour deux mandats consécutifs de président (1829-1837). Andrew et son épouse Rachel sont tous les deux enterrés dans le jardin de la demeure.