En 1467, el castillo fue derribado por los irmandiños. Posteriormente, en 1471 se reconstruyó por orden de Lope Sánchez de Moscoso haciendo hincapié en el aspecto defensivo, gracias a lo cual consiguió parar el avance de las tropas del arzobispo de Santiago.A la muerte de Don Lope, heredó los derechos sucesorios su primo don Rodrigo Osorio de Moscoso, quien, amplio la fortaleza, que se convirtió en un receinto de 6 torres y una construcción palacial.
LinkedIn