Contrajo nupcias con Akihime (Chikurin-in), hija de Ōtani Yoshitsugu y hija adoptiva de Toyotomi Hideyoshi, matrimonio del cual tuvo dos hijos: Daisuke y Daihachi y varias hijas.