히젠 국
사누키 다카마쓰 번 제11대 번주(훗날 백작) 마쓰다이라 요리토시(松平頼聰)의 열번째 아들이다. 생모는 히코네 번 제15대 번주이자 다이로 이이 나오스케의 차녀 지요코(千代子)이다. 귀족원의장을 역임한 백작 마쓰다이라 요리나가가 동복형이다. 처는 히젠 국 사가 번 제11대 번주(훗날 후작) 나베시마 나오히로의 여섯번째 딸 도시코(俊子)이다. 장남 요리히로(松平頼明)는 아이가 없었던 형 요리나가의 양자로 되어 백작 작위를 승계하였다. 장녀 마쓰다이라 요시코(松平佳子)는 백작 히로하시 다다미쓰(廣橋眞光)의 의붓동생이 되어 이왕가의 이건과 혼인하였다.