子战死。在这段期间，跟随成为今川家人质的德川家康居住在骏府，弘治3年1月8日（1557年2月17日），与逗留在骏府的山科言继在酒宴中见面（『言继卿记』）。此后，言继在永禄11年10月10日（1568年11月9日）等会面，双方加深交情（『言继卿记』）。天正3年（1575年），乘远的次男乘高夜袭大给城，于是逃往尾张国。在天正5年8月21日（1577年10月2日）死去。享年62岁。