Philip den andre , som ville föra samlingarna i Valladolid till Madrid , arkitekten Caspar de Vega 1560 uppföra en byggnad , som gränsade till det kongliga slottet.