Poco después de los atentados del 11 de septiembre, Silverstein declaró su intención de reconstruir el complejo, aunque él y sus aseguradoras se vieron envueltos en una disputa de varios años sobre si los ataques habían constituido un evento o dos en términos de póliza de seguros, que prevé un máximo de 3550 millones de dólares de indemnización por el evento. Se alcanzó un acuerdo con las aseguradoras en 2007 que aceptaron pagar 4.550 millones de dólares, que no era tanto como la cantidad monetaria que Silverstein solicitó. Silverstein también tuvo múltiples disputas con otros partidos políticos, incluyendo con la autoridad portuaria. En un acuerdo alcanzado en abril de 2006, Silverstein conservaba los derechos para construir tres torres de oficinas (Four World Trade Center, Three World Trade Center y Two World Trade Center), mientras que el One World Trade Center pertenecería a la autoridad portuaria, al igual que la torre cinco, que podría haber tenido la opción de ser arrendada por un promotor privado y ser convertida en un edificio residencial.