Aún sin terminar, el edificio fue ocupado en 1808, habiendo abandonado España ya los Borbones, y con José Bonaparte en el trono, el cual lo destinó a acuartelamiento de los guardias de corps.