Ce domaine de 2,5 ha à la végétation luxuriante n'était qu'un maigre herbage lorsque que Harry Robinson, héritier d'une famille de propriétaires de grands magasins, et sa femme Virginia en firent l'acquisition en 1911 : ce fut le premier lot résidentiel vendu à Beverly Hills. S'inspirant de leur lune de miel de 4 ans en Europe, le couple y érigea une villa de style méditerranéen ainsi qu'un élégant Pool House entouré de jardins anglais et méditerranéens en terrasse et rassemblant 50 variétés de camélias. Les Virginia Robins Gardens s'enorgueillissent également de la présence du plus grand bosquet de palmiers royaux en dehors de l'Australie. À sa mort, Mme Robinson légua le domaine à la municipalité de Los Angeles. Les jardins et la maison ouvrirent au public en 1982.