No obstante, se conoce que el Castillo fue habitado hasta finales del siglo XV, como se deduce por su nombre, pertenecería al linaje de los Banu Qasi («hijos de Qásim») que ocupaban el castillo de Montornés antes de la conquista cristiana, primero por el Cid Campeador y finalmente por el rey Jaime I de Aragón.