Les primeres referències de la muralla de Pals les trobem en el segle XII. En 1478, després de la guerra contra Joan II, les muralles i el castell van quedar molt malmesos i el monarca va permetre utilitzar les pedres del ruïnós castell per refer les muralles i l'església de Sant Pere.

El creixement de la vila cap als sectors de ponent, llevant i migdia va fer que la muralla anés quedant integrada dins del tramat urbà i s'anessin destruint alguns fragments per permetre l'expansió de la població. Encara podem veure en aquest sector panys de muralla que es van aprofitar per construir-hi habitatges.

En canvi, el sector nord ha restat pràcticament intacte.

En ell podem trobar quatre torres de planta quadrada, buides per la cara interior i amb una volta de canó lleugerament apuntada.

Reben el nom de torre d'en Ramonet, d'en Rom, d'en Xinel·lo i de l'Hospital.

En l'actual Plaça Major trobem un portal gòtic, que permetia travessar la muralla en aquest punt. Es creu que hi podia haver existit en aquest indret una plaça porxada o llotja similar a la que encara es conserva en Ullastret.