Edificado a finales del siglo XV por orden de la familia Fajardo, adelantados mayores del Reino de Murcia y posteriores Marqueses de los Vélez.