万延元年(1860年)に直弼が暗殺された後も引き続き朝廷と打ち合わせを進め、文久元年(1861年)に下向の目途が付くと11月11日に神奈川奉行に転任、翌文久2年(1862年)8月21日に起こった生麦事件の対応に追われた。