Familien leide en gård og var i en utsatt posisjon fordi jøder i det russiske imperiet egentlig ikke hadde lov til å drive jordbruk. Familien betalte høy pris til jordeieren og bestakk den lokale politimannen. Livet på den relativt isolerte gården ga en viss beskyttelse mot pogromene i byene på den tiden, Lemkin husket selv pogromene i 1903-1906 og 1919-1921 (i 1881 hadde det vært en særlig stor bølge anitjødisk vold). Lemkin konkluderte senere med at tsarens tjenestemenn tillot pogromene fordi det avledet oppmerksomheten fra kritikk av regimet. Jødene ble beskyldt både for å være sosialister og for å være kapitalistiske utbyttere. Han vokste opp i en minoritet som levde under en konstant fare for vold.