元禄16年(1703年)、信濃高遠藩初代藩主・内藤清枚の養子・長頼が廃嫡されたため、代わって養子となる。