寛政8年(1796年)2月15日、第4代藩主・内藤政韶の長男として江戸にて誕生。