その実情を明治5年（1872年）、フィッシュ国務長官が森有礼公使に伝えた事から、日本側では機会をとらえては返還の要請をしていたものである。
其后明治5年（1872年）、美国国务卿汉密尔顿·菲什与森有礼会面的时候，日本侧乘机向美国提出交还赔偿金的要求。