La tour lézardée de l'Orle-d'Or appartenait autrefois au donjon de Semur, démantelé en 1602. Elle doit son nom aux créneaux (supprimés), jadis revêtus de plomb cuivré (« un ourlet d'or »). Ses dimensions sont imposantes : 44 m de hauteur, murs d'environ 2,20 m d'épaisseur au sommet, de 5 m à la base. Avant la construction du pont Joly (1787), la tour de l'Orle-d'Or était également l'une des entrées de la ville. Aujourd'hui, elle abrite le siège de la Société des sciences historiques et naturelles de Semur.