父・頼重の後嗣には光圀の子・松平頼常が内定していたため、高松藩主の次男であるより水戸藩主の次男である方がいいだろうということで、水戸家に入ったという。