Helgeandsholmens bebyggande med ett riksdagshus nu måtte falla för att sedan aldrig mera stå upp igen.