、次兄·阿部正固去世而成为嫡子。明和4年（1767年）授备中守任从五位下，明和6年（1769年）因正右去世而继承福山藩主。从前代开始福山藩陷入了财政危机，正伦袭封的同时即致力于财政改革，但是并无太大效果，并且由于天候不顺而更进一步受到收入不足的压力。并且一揆爆发后改革受阻，结果造成了更严重的财政紧缩。此时，代替了一直占据改革核心位置的叔父安藤主马而一跃而上的远藤弁藏担负了重建财政的任务而决心使收入成功增长，施行了严苛的政策，遭到了领民极端的不满。并且，福山藩借入了被称为比鬼还恐怖的“上下银”（天领的贷款），