Seorang sejarawan South Dakota, Doane Robinson, adalah orang pertama yang memiliki gagasan untuk mengukir wajah orang terkenal di Black Hills untuk mempromosikan pariwisata di daerah tersebut. Gagasan awalnya sebetulnya adalah hendak mengukir di bagian gunung yang disebut Needles. Namun Gutzon Borglum menolaknya karena kualitas granit di sana kurang baik dan ada penentangan yang kuat dari kelompok-kelompok penduduk asli Amerika. Akhirnya mereka memilih lokasi Gunung Rushmore, yang juga memiliki keuntungan karena menghadap ke tenggara sehingga memperoleh paparan sinar matahari secara maksimal. Robinson semula menginginkan untuk menampilkan pahlawan-pahlawan western seperti Lewis dan Clark, Red Cloud, dan Buffalo Bill Cody, Tetapi Borglum memutuskan bahwa ukiran harus lebih bersifat nasional dan memilih wajah keempat presiden tersebut untuk diukir di gunung. Setelah mengamankan pendanaan melalui sponsor yang antusias dari "pelindung politik besar Gunung Rushmore", Senator Peter Norbeck, pembangunan dari ukiran peringatan ini dimulai pada tahun 1927, dan wajah para presiden yang diukir rampung antara tahun 1934 sampai 1939. Dengan meninggalnya Gutzon Borglum pada bulan Maret 1941, puteranya Lincoln Borglum mengambil alih pembangunan. Walaupun konsep awal bermaksud mengukir setiap presiden itu dari kepala sampai pinggang, tetapi karena ketiadaan dana terpaksa pembangunan dihentikan di akhir bulan Oktober 1941.