Madame de Kernevenoy, viuda del preceptor del conde de Anjou (futuro Enrique III), compró el palacio en 1572.