En 1571 se adquirió parte de la biblioteca de Gonzalo Pérez, uno de los asesores del rey, muerto cinco años antes, tras negociaciones con su hijo.