En 2004 el museo se amplió para albergar el núcleo más valioso de la Colección Carmen Thyssen-Bornemisza, mediante la suma de dos edificios colindantes antes pertenecientes a la familia Goyeneche; el primero de ellos mandado construir por el Conde de Guaqui y el segundo por la Duquesa de Goyeneche.