En 1611 se inició la construcción de un nuevo edificio, terminado en 1618, que incluía también una pinacoteca para albergar principalmente la colección de pinturas y dibujos donadas por el cardenal.