正右于宽延3年（1730年）进入福山藩领内视察，不过之后都在江户或者京都居住。宝历2年（1752年）任奏者番，宝历6年（1756年）兼任寺社奉行，宝历10年（1760年）转任从四位下、京都所司代。虽然任京都所司代期间有打破先例受到处分的事，不过、也在后樱町天皇即位的祭礼中大显身手。明和元年（1764年）就任西丸老中，翌年（1765年）任本丸老中。这是阿部家宗家中自阿部重次以来约100年后首次任老中。但是，因为正右的发迹而强迫福山藩困难地支出了大量的经费。为此福山藩泛滥地发行藩札（银札）以填补严峻的财政赤