Entre las curiosidades que encierra el edificio está el haber servido de almacén de muchas de las obras del museo del Prado durante la Guerra Civil, aunque tradicionalmente sólo se citan las Torres de Serranos como refugio del patrimonio artístico nacional en esa época.