Tras la conquista de Chulilla por los cristianos y su incorporación a la Corona de Aragón, sufrió reformas importantes en los siglos XIV (acondicionamiento para las guerras con Castilla), XV y XVI (a esta época pertenecería la fortificación atalaya del "Frailecico" que desde el otro lado controlaba el territorio al sudoeste), sobre todo por su utilización como residencia señorial y más tarde como cárcel para eclesiásticos.