עם כל זאת, היה היחס הפולני לשואה מצד האוכלוסייה בכללותה לעיתים אדיש, ולעיתים אף משתף פעולה, אף כי היו גם כאלה שסיכנו את חייהם וסייעו ליהודים. הגרמנים ניצלו את הרגשות האנטישמיים של חלק מהאוכלוסייה. רבים הסגירו את שכניהם היהודים, ויש שעשו לעצמם מחיה כ"ציידי היהודים". באזורים המזרחיים של פולין הייתה האנטישמיות חזקה במיוחד, ורבים האשימו את היהודים בסיוע למשטר הקומוניסטי במהלך הכיבוש הסובייטי בשטחי מזרח פולין בשנים 1939–1941, האשמה שהיה לה על מה להתבסס לגבי חלק מהיהודים. האנטישמיות הייתה חזקה במזרח פולין ובכללה בפולין גם לפני הסיוע למשטר הקומינסטי של חלק מהיהודים. בעיירה ידוובנה במחוז ביאליסטוק הושמדו יהודי העיירה על ידי האוכלוסייה המקומית בסמוך לאחר כיבושה מן הגרמנים, ביולי 1941.