Debido a que los matrimonios mixtos entre japoneses y occidentales estaban prohibidos, "von Siebold" vivió amancebado con su pareja japonesa "Kusomoto Sonogi".