סילברסטיין סיפר במספר ראיונות שנהג לאכול את ארוחות הבוקר שלו בחלונות הגבוהים של מגדל הסחר העולמי, יחד עם שוכרים חדשים בבניין. בבוקר ה-11 בספטמבר התעקשה אשתו שילך לתור אצל רופא העור שלו. לאחר פיגוע הטרור הגדול באותו היום, כל הבניינים במרכז הסחר העולמי (1, 2, 3, 4, 5, 6, ו-7) נהרסו או נפגעו ברמה שלא איפשרה את שיקומם. קודם לכן, ביולי 2001, קבעו פוליסות ביטוח כי שווי המתחם הוא 3.55 מיליארד דולר.