Sargent era extremadamente celoso de su vida privada, aunque el pintor Jacques-Émile Blanche, que fue uno de sus primeros modelos, dijo después de su muerte que la vida sexual de Sargent "era notoriamente escandalosa en París y Venecia.