干隆三十八年（1773年）十二月，允祕逝世。长子弘畅降爵袭郡王，仍居本府。允祕次子弘旿在干隆三十九年（1774年）获封固山贝子，在王府南端即今大取灯胡同9号另建一座贝子府（后为多公府）。弘畅长子多罗贝勒永珠因犯事而遭夺爵。因永珠无子嗣，乃以弘旿之孙绵勋为继子，降袭贝子。同治年间，由于绵勋贝子府仍为原来王府的规格，早就逾制，乃将王府后半段割为民宅，后形成小苏州胡同（1965年更名为阳春胡同），并将王府西南部大块割出（其最南端形成兴隆胡同）。同治八年（1869年），绵勋贝子府被赐给荣安固伦公主，绵勋迁