लतीफ ने अपने काम की शुरुआत जुए और गैरकानूनी शराब का व्यापार करने से की और फिर बहुत जल्द वह कुख्यात अंडरवर्ल्ड डॉन दाऊद इब्राहिम का करीबी हो गया. लतीफ को उसकी रॉबिनहुड इमेज के लिए भी जाना जाता है. कहा जाता है कि वह अमीरों से लूटा हुआ पैसा गरीबों और जरूरतमंदों में बांट दिया करता था.