কথিত যে, সৈয়দ মহম্মদ খাঁ এক বিশাল সেনাবাহিনী সঙ্গে নিয়ে দিনাজপুর শহরে নিকটবর্তী রাজবাড়ি আক্রমণ ও লুঠ করতে এগিয়ে আসেন।