Sin embargo, esta propuesta suscitó un debate sobre el uso definitivo del edificio, pues hubo quienes desaconsejaron trasladar a él "Las lanzas" y otros cuadros de Velázquez, pues implicaría separarlos del resto de obras de dicho artista, mientras para otros críticos resultaba desmesurado acometer tal reforma sólo para reconstruir un salón.