Tòa nhà Empire State từng là tòa nhà cao nhất thế giới từ khi hoàn thành cho đến năm 1972, khi Tòa tháp Bắc cao 110 tầng của Trung tâm Thương mại Thế giới cũ được hoàn thành. Với độ cao , Trung tâm Thương mại Thế giới giành danh hiệu tòa nhà cao nhất thế giới trong một khoảng thời gian ngắn tới khi Tòa tháp Sears (nay goi là Tòa tháp Willis) cao 108 tầng hoàn thành tại Chicago năm 1974. Các tòa tháp Trung tâm Thương mại Thế giới đã bị phá hủy bởi các vụ khủng bố năm 2001, và Tòa nhà Empire State đã giành lại danh hiệu tòa nhà cao nhất thành phố. Nó tiếp tục giữ danh hiệu này cho đến tháng 4 năm 2012, khi công trình Trung tâm Thương mại Thế giới Một vượt qua nó. Tòa nhà cao thứ tư tại New York là Tòa tháp Bank of America, cao , bao gồm cả phần đỉnh tháp xoắn ốc. Cao thứ năm là Tòa nhà Chrysler cao , đã từng là tòa nhà cao nhất thế giới từ năm 1930 tới năm 1931, cà Tòa nhà New York Times, được hoàn thành năm 2007.