A partir de 1548 asumió también la dirección de las obras y finalizó el castillo de Madrid, en el Bois de Boulogne, que había sido mandado construir por Francisco I en 1527 según diseño de Girolamo della Robbia y finalizado en el mismo reinado de Enrique II hacia 1552.