En 1575, el conde encargó su ampliación y reforma para convertirlo en palacio renacentista con un espléndido jardín.