尔夏特、亨利·福尔兹等6人关于盲人教育的必要性进行了讨论，决定设立“乐善会”以筹备盲人学校的建立。翌年，前岛密、、、山尾庸三等人加入。1876年，政府批准设立乐善会训盲院，由东京府拨给经费3000日元。校区位于筑地3丁目，占地约15800平方米（4783坪）。1879年12月，校舍落成。总面积约330平方米（100坪），红砖构造，高2层。1880年开始授课。随着日本社会逐渐认识到不仅盲人，聋哑人也应该接受教育，1884年，学校开始招收聋哑者并更名为训盲哑院。1886年，管理权由文部省接管，成为官立学校，