在黑船来航的时候，他跟随前往浦贺港迎接zh-hans:马休·佩里; zh-hant:马修·培理。安政元年（1854年），为了考察国防，他环绕了日本，坐船经北陆道、山阴道抵达丰前小仓，其后从长崎出发经肥后国、日向国前往四国，再沿伊予国、赞岐国抵达纪伊国，再经伊势国、三河国后，沿经东海道后于伊豆国启航返回江户。翌年，他寄身于旗本的屋敷，在遇上后深感学习英语的重要性，也曾经跟设乐氏家臣学习数学。同年，他跟随学习，翌年则跟随士学习兵法。其后，他又在观光丸船长竹内贞基的指导下学习，在贞基支援下入读，作为见习生