En 1502 el cardenal encargó una biblioteca, con acceso desde el pasillo de la catedral de Siena, que estaría destinada a albergar la biblioteca de textos humanistas reunidos por su tío, y que encargó decorar al artista Pinturicchio con frescos en la bóveda y diez paneles narrativos a lo largo de las paredes que representaran escenas de la vida de Pío II.