છૂટ્યા પછી તેમને લાગ્યું કે હિંદુ અસ્મિતાના પ્રાચીન આદર્શો લોકો સુધી મોટી સંખ્યામાં પહોંચાડવા જ જોઈએ એટલે ગોરખપુરમાં ગોવિંદ ભવન ઉભું કર્યું.