El castillo estaba situado en el centro de la villa. De la muralla que rodeaba la ciudad todavía se pueden ver algunos restos de muros y alguna torre. 

Del castillo sólo queda en pie la torre del homenaje, conocida como torre de Santa Eulàlia. Se construyó a finales del siglo XII o principios del XIII. Tiene una altura de veintiséis metros y unos muros de casi dos metros y medio de ancho. A siete metros del suelo encontramos la puerta de entrada. Está formada por un arco de medio punto dovelado. La puerta que hay a los pies de la torre es de factura moderna. 

Junto a la puerta podemos ver el arranque de un arco y el trazado de una cubierta de doble vertiente, que debían de formar parte de alguna edificación del castillo adosada a la torre.