路易十四建造了国王塔楼和王后塔楼。文森城堡从此就成为皇室的第三处住宅。建筑工程并没有很快完成，因为此时大量的精力财力用于凡尔赛宫的修建。文森城堡中保存了路易十四早期风格的一些作品，但很快作品的质量就被维孔宫城堡超过了。只因为此事，维孔宫城堡的建造者尼古拉斯·富凯被投进了文森城堡的监狱中。十八世纪，城堡被皇室废弃了。后来它成了生产文森瓷器（塞夫勒瓷器的前身）的工厂，后又成为国家监狱。萨德侯爵、米拉波侯爵、德尼·狄德罗侯爵都曾被关押在此。1796年，文森城堡被改造成军工厂。1804年，昂基安公爵在城堡的