Ce jardin de 1,6 ha, qui porte le nom de son bienfaiteur new-yorkais, est un havre de paix et de contemplation où fleurissent les bancs d'antan, les cache-pots de vases, les allées et les réverbères de style 19e. La pièce maîtresse du jardin est son parterre ornemental, décoré façon 19e avec des plantes saisonnières. Le portail en fer et en grès rouge donnant sur Independence Avenue a été élaboré à partir de dessins de James Renwick, architecte du château.