La tour lézardée de l'Orle d'Or appartenait autrefois au donjon de Semur, démantelé en 1602. Elle doit son nom aux créneaux (supprimés), jadis revêtus de plomb cuivré (« un ourlet d'or »). Ses dimensions sont imposantes : 44 m de hauteur, murs d'environ 2,20 m d'épaisseur au sommet, de 5 m à la base. Avant la construction du pont Joly (1787), la tour de l'Orle d'Or était également l'une des entrées de la ville. Aujourd'hui, elle abrite le siège de la Société des sciences historiques et naturelles de Semur.