Il a été construit vers le XIe siècle par les seigneurs de Calmont. Jalonné dès le XIIe siècle de diverses échoppes, il fut au XVe siècle inclus dans le système de fortifications de la ville et doté de trois tours, Il offre un joli coup d'œil sur les « Calquières », maisons à galeries couvertes des tanneurs, avec les dalles, appelées « gandouliers » où on lavait les peaux, et le petit château Renaissance en amont. Ses quatre arches de grès rouge lui donnent un charme indéniable.