En 1884-1886, el testamento del duque y las posteriores disposiciones motivadas por su segundo exilio, hacen que el castillo de Chantilly y sus colecciones pasen a manos del Instituto de Francia.