Det är en gammal känd invändning från motståndare till rösträttens utsträckning attarbetarna