Ante la construcción del castillo, el Marqués se encontró con dos problemas fundamentales: la existencia de una fortaleza anterior y la segunda y más importante, la negativa dictada por los Reyes Católicos y Carlos I de construir nuevas fortalezas en España.