Neste bestyrer etter Bjørset var Johannes Berge, som tok over stillingen i 1928. Under hans tid ble lærerseminaret de delte bygg med lagt ned i 1931, og året etter tok døveskolen over hovedbygget. Her ble det drevet spesialskole med internat fram til 1980-tallet.