Zur Zeit des Kalifornischen Goldrauschs hieß der Pass noch "Livermore's Pass" nach der anliegenden Ranch von Robert Livermore. Als die Eisenbahn 1869 über den Pass gebaut wurde, wurde auf der Passhöhe eine Siedlung eingerichtet, die sich anfänglich "The Summit" (Der Gipfel) und später spanisch-historisierend "Alta Monte" (Hoher Berg) nannte. Der Pass und die Gemeinde von 1872 nahmen im weiteren den Namen "Altamonte" an, allerdings ist die Passhöhe heute weitgehend unbewohnt (das örtliche Postamt schloss 1955).