L'enceinte protégeant l'agglomération doit remonter à la fin du 13e siècle et au début du 14e, au moment des guerres de Cent ans. L'accès est contrôlé par trois portes, celle de la ville au sud, la porte Ricard à l'est et la porte de Ferracap au nord. Les maisons accolées sont ouvertes de fenêtres géminées qui devaient être fermées en cas de danger.