专卖等政策，使藩库恢复盈余的萨摩藩家老调所广乡（调所笑左卫门）暗中反对齐彬继位，就这一点与岛津齐兴的侧室利益一致，因此两人积极游说藩主改立由罗之子岛津久光为世子。齐兴也渐渐心动，即使齐彬已年过40仍迟迟不让位。至于岛津齐彬则久居江户，与幕府首席老中阿部正弘交好并结为盟友。嘉永元年（1848年），阿部正弘借由调查萨摩藩走私一事，逼迫调所广乡在江户萨摩藩邸服毒自杀（死于嘉永元年12月19日/1849年1月13日），痛失辅弼的齐兴对齐彬深为愤恨，因此这次虽然扳倒了久光派的重臣，齐彬仍未顺利接位。嘉永2年（18