典完后便返回日本担任栃木县足利市住职兼觉王山日泰寺执事。明治三十九年（1906年）5月，伊东大器奉派至基隆，明治四十年（1907年）升为主任布教师，同年7月《台湾日日新报》记者慎堂探访时仙洞外已建有布教所。明治四十年（1907年）11月伊东氏向总督府申请将辩才天由右边移至中央，维持经费来源为当地居民发起赖母子讲（互助会）的利息，互助会费用则由基隆仕绅小林伊三郎、石川丰之两人管理，信徒总代为吉川荣三郎、太平诚意、小川伊三郎、三谷助三郎、中根幸太郎等五人。不过由于此时布教所尚未正式成立，故基隆厅将伊东氏