২০০৫-০৬ সালের দিকে বিএনপির মনোনয়ন লাভের আগেই জোট সরকারের আমলে আদমজী জুটমিল ভাঙার কাজ পান আসলাম। বেশ কয়েকটি রুগ্ণ কারখানাও কিনে নেন তিনি। এ সময়েই তিনি চাকরি ছেড়ে গড়ে তোলেন চট্টগ্রামভিত্তিক শিল্প পরিবার ‘রাইজিং গ্রুপ অব কোম্পানিজ’।