1928 wurde mit dem Bau des Hochhauses begonnen, wofür schon 1919 die erst 1906 fertiggestellte Madison Square Presbyterian Church von Stanford White für McKim, Mead, and White abgerissen werden musste. 1933 wurden die Bauarbeiten wegen Finanzproblemen, als Folge des schwarzen Donnerstags, eingestellt. Bis dahin waren erst 29 Etagen fertiggestellt. In den nächsten Jahren ruhten die Arbeiten an dem Hochhaus, erst 1950 wurde es fertiggestellt. Allerdings nicht, wie geplant mit 100 Etagen, sondern mit lediglich 30.