Fue construido en el siglo XV para la casa de Zúñiga sobre un castillete anterior que les cedió el infante don Juan Manuel.