成島司直
その後、司直は、死までの20年間近く、幕府に再び用いられることはなかった。失脚の理由は一切公表されず、現在でも憶測の対象になっている。木村芥舟によれば、家慶に寵用され、たびたび外政にも干渉したので、それを妬んで讒言した者がいたからだという(『旧幕府』2号所収「幕府名士小伝」)。岡本氏足(岡本近江守)によれば、その妬んだ者とは目付の鳥居耀蔵であるという(山田三川編『想古録』1055、ちなみに耀蔵は司直の元上司・林述斎の二男でもある)。山本武夫は、司直失脚は、天保の改革の主導者だった水野忠邦の失脚(同年閏9月13日)の直後であることから、これと関係があるのではないか、と推測している(『国史大辞典』)。
のち、嘉永2年(1849年)11月に、子の筑山が『御実紀』副本を完成させたことで賞賜され、司直の存命中に成島家は名誉回復されている。その筑山は、同6年(1853年)、養父に先立ち死去。司直は息子に遅れること9年、文久2年8月13日(1862年9月6日)に亡くなる。司直は、晩年は政治的には不遇であったとはいえ、戸川安清寿蔵碑の本碑を撰したのが文久元年(1861年)ごろ、同碑文で従五位下・図書頭を名乗っているため、学者としての地位・名声は保ったまま死去したようである。墓所は雑司ヶ谷霊園(東京都豊島区南池袋四丁目)。