উল্লেখ্য যে, রাজবাড়ী রেল স্টেশনটি ১৮৯০ সালে স্থাপিত হয়। ঐতিহাসিক আনন্দনাথ রায় ফরিদপুরের ইতিহাস পুস্তকে বানিবহের বর্ণনায় লিখেছেন - নাওয়ারা চৌধুরীগণ পাঁচথুপি থেকে প্রায় ৩০০ বছর পূর্বে বানিবহে এসে বসবাস শুরু করেন। বানিবহ তখন ছিল জনাকীর্ণ স্থান। বিদ্যাবাগিশ পাড়া, আচার্য পাড়া, ভট্টাচার্য পাড়া, শেনহাটিপাড়া, বসুপাড়া, বেনেপাড়া, নুনেপাড়া নিয়ে ছিল বানিবহ এলাকা। নাওয়ারা চৌধুরীগণের বাড়ি স্বদেশীগণের নিকট রাজবাড়ী নামে অভিহিত ছিল। মতান্তরে রাজা সূর্য কুমারের নামানুসারে রাজবাড়ীর নামকরণ হয়। রাজা সূর্য কুমারের পিতামহ প্রভুরাম নবাব সিরাজ-উদ-দৌলার রাজকর্মচারী থাকাকালীন কোন কারণে ইংরেজদের বিরাগভাজন হলে পলাশীর যুদ্ধের পর লক্ষীকোলে এসে আত্মগোপন করেন। পরে তাঁর পুত্র দ্বিগেন্দ্র প্রসাদ এ অঞ্চলে জমিদারী গড়ে তোলেন। তাঁরই পুত্র রাজা সুর্য কুমার ১৮৮৫ সালে জনহিতকর কাজের জন্য রাজা উপাধি প্রাপ্ত হন। রাজবাড়ী রেল স্টেশন এর নামকরণ করা হয় ১৮৯০ সালে। বিভিন্ন তথ্য হতে জানা যায় যে, রাজবাড়ী রেল স্টেশন এর নামকরণ রাজা সূর্য কুমারের নামানুসারে করার দাবি তোলা হলে বানিবহের জমিদারগণ প্রবল আপত্তি তোলেন। উল্লেখ্য, বর্তমানে যে স্থানটিতে রাজবাড়ী রেল স্টেশন অবস্থিত উক্ত জমির মালিকানা ছিল বানিবহের জমিদারগণের। তাঁদের প্রতিবাদের কারণেই স্টেশনের নাম রাজবাড়ীই থেকে যায়। এ সকল বিশ্লেষণ থেকে ধারণা করা হয় যে, রাজবাড়ী নামটি বহু পূর্ব থেকেই প্রচলিত ছিল। এলাকার নাওয়ারা প্রধান, জমিদার, প্রতিপত্তিশালী ব্যক্তিগণ রাজা বলে অভিহিত হতেন। তবে রাজা সূর্য কুমার ও তাঁর পূর্ব পুরুষগণের লক্ষীকোলের বাড়ীটি লোকমুখে রাজার বাড়ি বলে সমধিক পরিচিত ছিল। এভাবেই আজকের রাজবাড়ী।