Empire State Building var världens högsta byggnad i 39 år, tills World Trade Centers norra torn nådde sin maxhöjd utan antennen 1970. Sedan 11 september 2001, då World Trade Center förstördes i en terroristattack, blev Empire State Building återigen New Yorks högsta byggnad. Den 30 april 2012 nådde dock One World Trade Center samma höjd och blev högre efter det. Även bostadshuset och hotellet 432 Park Avenue har blivit högre.