Im Schloss und den Nebengebäuden waren während des Kriegs bis zu 100 Flüchtlinge aus dem Ruhrgebiet, aus Ludwigshafen, aber auch aus Freiburg und Umgebung untergebracht. Auch der spätere Kultusminister von Bayern, Hans Maier, verbrachte die Bombennacht des 27. November 1944 im Ebneter Schlosskeller. Die letzten Flüchtlinge verließen erst 1950/51 das Anwesen. Die Küche befand sich ursprünglich im Kellergeschoss und wurde erst 1958 in das Erdgeschoss verlegt. Das Schloss diente auch als einer der Drehorte des 1958 erschienenen Musik- und Heimatfilms "Schwarzwälder Kirsch".