Ce parc a été aménagé dans un massif rocheux calcaire que contourne une boucle de la Lesse. La rivière y a d'ailleurs creusé un lit souterrain exploré depuis 1962. Forteresse naturelle, le site a été occupé jusqu'au 10e s. En témoignent les bains romains reconstitués et les ruines au sommet du plateau d'où s'ouvrent de belles perspectives sur la vallée de la Lesse. Le promontoire est truffé de grottes, où l'on a découvert des traces de la vie préhistorique.