Según un privilegio de Juan II de 1437, se estaba construyendo «la casa mejor que en España se fallaba».