Die Zahl der jüdischen Gemeindeglieder in Walldürn entwickelte sich im 19. und 20. Jahrhundert wie folgt: 1825 (23 jüdische Einwohner, 0,8 % von insgesamt 2.798 Einwohnern Walldürns), 1858 (37), 1864 (38), 1875 (25, 0,8 % von 3.174 Einwohnern), 1900 (14), 1921 (21), 1924 (23 jüdische Einwohner, 0,6 % von insgesamt etwa 4.000 Einwohnern Walldürns), 1933 (noch 19). Nach 1933 verließen einige aufgrund der nationalsozialistischen Repressalien die Stadt. Auch der zunehmende wirtschaftliche Boykott der jüdischen Geschäfte, sowie die zunehmende Entrechtung und andere Repressalien sorgten dafür, dass jüdische Einwohner Walldürns weggezogen beziehungsweise ausgewandert sind. Die letzten zehn Juden wurden 1940 ins KZ Gurs deportiert.