Une université dirigée par les Jésuites (1572), une école royale militaire (fin du 18e s.), puis un lycée : telle fut l'évolution de ce bâtiment, dont la cour d'honneur a retrouvé son aspect des 16e et 17e s.