Construit sous Louis XI au moment de l'annexion de la Bourgogne par la France, la forteresse a évolué au cours des siècles en fonction des progrès de l'artillerie, de 1480 jusqu'en 1870. Dans la cour, le logis du Gouverneur et les casernes datent du XVIe siècle.