Les grottes sont situées au début des gorges. Cox's Cave fut découverte en 1837 et Gough's Cave en 1890. Une série de chambres suit le cours de ruisseaux souterrains traversant le calcaire poreux. Les couleurs des stalagmites et stalactites, des chutes pétrifiées, des rideaux de dentelle et des colonnes dépendent des minéraux qui composent le calcaire : rouge rouille (fer), vert (manganèse) et gris (plomb).