El rey Luis II de Baviera disfrutó viviendo en Hohenschwangau, especialmente después de 1869 cuando se inició la construcción de su propio castillo, Neuschwanstein, a partir de una piedra que provenía del castillo de la familia.