Su familia, la Casa de Wittelsbach, era contraria al régimen de la Alemania Nazi, y Ruperto llevó a su familia a Sárvár, en Vas, Hungría, en el año de 1940.