La esposa de Ōyama, Yamakawa Sutematsu, fue hermana de los antiguos vasallos del clan Aizu, Yamakawa Hiroshi y Yamakawa Kenjiro; y era conocida por ser una de las primeras estudiantes femeninas en ser enviadas a los Estados Unidos por la Emperatriz de Japón a comienzos de la década de 1870.