Le bourg s'est développé en contrebas, sur la rive. Petit à petit, l'espace a été structuré en trois parties distinctes, que les rois ont appelé leurs « trois châteaux », et qui figurent de manière stylisée sous la forme de trois tours sur les armoiries de la ville.
Ainsi, d'ouest en est, l'éperon est barré par une série de fossés - des douves sèches - qui séparent les trois châteaux : le fort du Coudray, le château du Milieu, et le fort Saint-Georges.
Chacun des trois châteaux possède une enceinte indépendante.
C'est dans le château principal, le château du Milieu, que se développent les principaux logis et le prieuré Saint-Melaine.
Forteresse intimement liée à la Pucelle d'Orléans qui délivra Orléans du joug de l'Angleterre et poussa Charles VII à se faire sacrer Roi de France ( Cathédrale de Reims en 1429) .