政亮は本家をはばかり、遠山を姓として遠山政亮と名乗った(第3代藩主・政貞の代になって内藤姓に復している)。