Situé à côté de l'église de Santa María, c'est l'un des rares châteaux conservés en Cantabrie. Avec les murs, dont il reste peu de vestiges, c'était un point clé pour la défense de la ville.
Il a probablement été construit comme élément défensif à la fin du XIIe et au début du XIIIe siècle. Il est de petite taille, 25 mètres sur 15 de chaque côté, avec un plan trapézoïdal, des tours d'angle cylindriques et une projection triangulaire se terminant également par un cylindre. À l'intérieur, il y a une salle voûtée en berceau, et on y trouve également une reproduction de la borne milliaire romaine de Néron Claude. Divers événements et expositions se déroulent actuellement dans ses locaux.
En 1853, le phare est construit dans la tour sud-est, de plan circulaire et en pierre de taille, ce qui en fait l'un des plus anciens de la région.
Avec toute la Puebla Vieja de Castro-Urdiales, elle a été déclarée Site Historique et Artistique en 1978.
