পিয়াজ্জা ডেলা সিগনোরিয়ার পালাজ্জো ভেচিওতে অল্প কিছুদিন থাকার পর, প্রথম ডিউক কোসিমো এবং তার স্ত্রী টলেডোর এলিওনোরা ১৫৪৯ সালে দেউলিয়া পিট্টি বণিক পরিবার থেকে মেডিসির সরকারি বাসভবন হিসেবে প্রাসাদটি অধিগ্রহণ করেন; শতাব্দী ধরে এটি সম্প্রসারিত এবং যথেষ্ট অলঙ্কৃত ছিল।
টলেডোর এলিওনোরা ছিলেন ডিউক কোসিমো ১ম-এর কন্যা।