希尔弗斯坦在进行重建工作也与其他方面发生了很多纠纷，这包括了与港务局的纠纷。2006年4月，拉里·希尔弗斯坦与他们达成协议。根据协议，拉里·希尔弗斯坦有权建造三个办公大楼（格林威治街150号，格林威治街175号和格林威治街200号），纽新港务局则持有世贸新一号楼，它可以被租赁给私人开发商并重新设计。
早期生活及所受的教育.拉里·西尔弗斯坦于1931年出生在布鲁克林区的一个犹太家庭。1952年他毕业于纽约大学，在那里他遇到了他未来的妻子——Klara。他们于1956年结婚，并育有三个