Danach stand das Gebäude leer, bis es Flüchtlingen des ungarischen Volksaufstands im Jahr 1956 als Flüchtlingslager diente. Da nach der Räumung des ehemaligen Brigitta-Spitals kein Bedarf an zusätzlichen Bettenkapazitäten für geburtshilfliche Einrichtungen bestand, wurde das Bauwerk nicht mehr seiner ursprünglichen Verwendung zugeführt. Im März 1958 fasste der Wiener Gemeinderat den Beschluss, das an den Winarskyhof – einen Wiener Gemeindebau – angrenzende Gebäude entsprechend einem Vorschlag des damaligen Stadtschulratspräsidenten Leopold Zechner in ein Schülerheim für 175 Schüler und Schülerinnen umzubauen. Das am 9. Oktober 1959 von Bürgermeister Franz Jonas eröffnete Internat war das erste in Österreich, in dem Buben und Mädchen sowie körperbehinderte Kinder und Jugendliche gemeinsam in einem Gebäude betreut wurden.