この8月14日（7月9日）および翌15日（7月10日）に行われた会談は、オールコック、ホープ、オリファント（第一次東禅寺事件で負傷し帰国予定）、老中・安藤信正、若年寄・酒井忠眦に通訳を加えただけの秘密会談であった。オールコックはここで幕府権力の低下という実態を知った。1860年頃より、幕府は新潟、兵庫および江戸、大坂の開港開市延期を求めていたが、オールコックはこれを断固拒否していた。しかし、この会談の後、オールコックは開港開市延期の必要性を理解し、幕府が派遣予定の遣欧使節を強力にサポートする。オールコックは1862年5月1日から開催予定のロンドン万国博覧会に自らが収集した日本の文物を出品のほか、この遣欧使節が招待客として参加できるよう手配していたが、それに加えて自身の休暇帰国を利用して、直接英国政府に開港開市延期を訴えることとした。使節一行は1862年1月21日（文久元年12月22日）日本を立ったが、オールコックは同行せず、3月23日（文久2年2月23日）に日本を離れ、後を追った。帰国直前の3月16・17日（2月16・17日）の両日、オールコックは老中首座・久世広周と秘密会談を持ち（安藤信正は坂下門外の変で負傷）より詳しく日本の情勢を理解した。5月30日にロンドンに着き、6月6日、5年間の開港開市延期を認めるロンドン覚書が調印された。帰国中の6月19日、バス勲章を授与され、サーの称号を得た。また、この休暇中、ラザフォードは自著『大君の都』を出版する手配を終え、1863年にロンドンで出版した。