Le collège Pélegry accueillit lors de sa première « rentrée des classes », en 1368, treize étudiants pauvres. Ce fut jusqu'au 18e s. l'un des établissements les plus importants de Cahors. Il est surmonté d'une belle tour hexagonale du 15e s.