1288年、マグヌス3世によってニィシャーピン城に軟禁されたが環境は悪くなく、ヴァルデマールはそこで公然と愛人を囲って1302年に死去するまでの余生を送った。
1288年，瓦尔德玛·比耶松被马格努斯三世囚禁在尼古平城堡（Nyköpingshus），并在他舒适的监狱里与情妇公开生活，直至1302年逝世时。