Van Gogh bodde etter hvert for seg selv i Haag, byer i Drenthe, og i Nuenen. Han innviklet seg inn i et problematisk forhold med «Sien», som egentlig het Christine Hoornik. Hun var en fattig kvinne med alkoholproblemer og med fortid som prostituert. Hun fødte i 1882 en sønn, men det er aldri blitt funnet beviser for at Vincent er faren. Forholdet skrantet og Sien og Van Gogh skiltes.