Du rempart médiéval subsistent encore deux tours comme celle-ci et la façade ouest de la cathédrale, flanquée de deux échauguettes, pour compléter la défense. Cette enceinte a bien protégé la cité et les Routiers ont dû se contenter de piller les alentours de la ville. En 1573, si les Protestants ont pu s’en emparer, ce n’est que par la ruse. Les fossés sont devenus boulevards, le pont a été reconstruit et des maisons se sont adossées au rempart.
En 1351, pendant la Guerre de Cent Ans, Lodève reçoit l'ordre de creuser des fossés et d'édifier une muraille. La cité populaire trouve alors à s'étendre à l'intérieur de l'enceinte, dans un quartier jusque-là délaissé et qui devient à partir de ce moment le quartier du Bourg-Neuf. Ainsi, la période de formation de la ville de Lodève s'achève à la fin du XIVème siècle. Lodève et le pays Lodevois doivent alors endurer les incursions des routiers, qui sont des pillards profitant du chaos régnant à cette période, ainsi que les excès des gens d'armes royaux, sans compter les disettes et les épidémies de pestes des XIVème et XVème siècle.
Le centre ancien de la ville conserve encore son tracé médiéval et les ruelles enchevêtrées, semblent comme comprimées derrière un rempart imaginaire.
