嘉永3年(1850年)、政図は13代藩主南部利義の小姓となる。