Padihams befolkning nådde sitt meste en gang rundt 1921 med bortimot 14 000 innbyggere, og med en nedgang til rundt 10 000 på 1960-tallet før det begynte stabilisere seg og har igjen kommet på dette befolkningstallet. Årsaken til utflytningen var at folk flyttet sørover i England på søken etter arbeid som følge av nedgang i de tradisjonelle arbeidene med kull, bomull og maskinfabrikasjon.