Som kronprins kjøpte han 21 år gammel slottsruinen Schloss Hohenschwangau nær Füssen og lot den restaurere med utsøkt smak. På slottet samlet han rundt seg en eksklusiv krest av kunstnere og lærde og viet sin tid til vitenskapelige og historiske studier.