文政13年(1830年)3月24日、美作津山藩の第7代藩主松平斉孝の五男として生まれる。