园的主人海洛夫·特罗勒交换，弗雷德里克二世并在城堡的两翼加建了皇后长廊，连接教堂及宫殿。弗雷德里克二世死后，其儿子克利斯蒂安四世执政，花了二十年时间对城堡进行了改建，使城堡复修成荷兰风格的文艺复兴建筑。1721年，克利斯蒂安六世建造了一座新的行宫，名为和平宫，而腓特烈堡城堡则辟建为皇家博物馆。1878年，丹麦正式将腓特烈堡城堡改为国家历史博物馆。1882年，腓特烈堡城堡正式向公众开放。
腓特烈堡女伯爵.丹麦女王玛格丽特二世于2005年4月16日宣布册封文雅丽为腓特烈堡女伯爵，这是在她