Por otra parte sabemos que en la construcción de la ermita de la Virgen de los Desamparados de Moraira, hoy parroquia, entre 1875 y 1878 se utilizaron parte de los sillares del castillo, así como en la edificación de otras casas se emplearon materiales procedentes del mismo.