बाबा साहेब आंबेडकर की बड़ी इच्छा थी कि समूचे भारत के सफाई कर्मचारियों को एक मंच पर इकट्ठा किया जाये. उनकी एक देशव्यापी संस्था बनायी जाये जो उनके उत्थान और प्रगति के लिए संघर्ष करे और उन्हें गंदे पेशे तथा गुलामी से निकाल सके. उन्होंने 1942 से 1946 तक, जब वे वायसराय की एग्जीक्यूटिव कोंसिल के श्रम सदस्य थे, सफाई मजदूरों की समस्याओं के अध्ययन के लिए एक समिति भी बनायीं थी. दरअसल बाबा साहेब भंगियों से झाड़ू छुड़वाना चाहते थे और इसी लिए उन्होंने "भंगी झाड़ू छोड़ो" का नारा भी दिया था.