Gegen Ende des Zweiten Weltkriegs wurden alle Gestüte im Einflussbereich der deutschen Wehrmacht nach Hostau (Hostouň) in die Sudeten evakuiert, auch Lipizza. Bei Abzug der Wehrmacht wurde auch das Gestüt fluchtartig verlassen, und die sich selbst überlassenen Tiere waren vom Hungertod oder gar Schlachtung für die ebenfalls hungernde Lokalbevölkerung bedroht. Obschon die Gegend dann schon sowjetisch besetzt wurde, und auch nach den Jalta-Abkommen der Sowjetunion zugesprochen, wurde die Herde in einer spektakulären und legendär gewordenen Aktion unter der Initiative von Oberst Reed, dem Leiter des Nachrichtendienstes der amerikanischen Kavallerie, und dem Panzer-General Patton, einem Pferdeliebhaber, und entgegen den ausdrücklichen Anweisungen des amerikanischen Oberkommandos, in einer schnellen Militäraktion am 28. April 1945 geraubt und nach Schwarzenberg in Wien verbracht, das unter dem Kommando der Vereinten Nationen stand. Diese Aktion wurde durch den Film "The miracle of the White Stallions" von Walt Disney (1963) weltbekannt. Wegen der Bombengefahr wurden sie kurz danach nach St. Martin in Oberösterreich in die amerikanische Besatzungszone evakuiert.