Así, a inicios del siglo XVI Carlos I de España, ya nombrado emperador de Alemania con el nombre de Carlos V, celebró un consejo en el castillo-palacio de los condes, mientras que en 1554 la villa y su alcázar se engalanaron para recibir al entonces príncipe Felipe y al infante Don Carlos.