Yoshiatsu nació en la Provincia de Mino en 1527 hijo de Toki Yoshiyori y adoptado por Saitō Dōsan.