Les travaux débutent avant 1570. La Saint-Barthélemy ralentit les travaux de construction, alors que les jardins commençaient à prendre leur essor. La mort du roi le marque la fin du chantier, laissant le château inachevé. Il devait être quatre fois plus grand que le château de Chambord et de style baroque. Seul affleurait le premier étage du seul corps de bâtiment entrepris. Un logis provisoire a cependant édifié, afin de permettre au roi de brefs séjours. Il comprenait deux pavillons dits « du Roi » et « de la Reine ». Le second subsiste encore aujourd'hui, devenu une maison d'habitation appartenant à un particulier. Les seuls vestiges du château sont les fossés et un bâtiment de communs avec la cheminée dans la salle des fêtes Charles IX de la commune.