নাটোরের রাণী ভবানী তাঁর নায়েব দয়ারামেরউপরে সন্তুষ্ট হয়ে তাঁকে দিঘাপতিয়া পরগনা উপহার দেন। ১৯৪৭ সালে তৎকালীনপাকিস্তান সরকার জমিদারী প্রথা বিলুপ্ত করার পর ১৯৫২ সালে দিঘাপতিয়ার শেষরাজা প্রতিভানাথ রায় সপরিবারে রাজপ্রাসাদ ত্যাগ করে কলকাতায় চলে যান।পরবর্তীতে ১৯৬৫ সাল পর্যন্ত রাজ প্রাসাদটি পরিত্যাক্ত থাকে।