Entre palacios a uno y otro lado, se asentaron el Gabinete de Historia Natural (hoy el edificio principal del Museo del Prado), el Real Jardín Botánico, la Platería de Martínez (en el lugar donde hoy está el Ministerio de Sanidad) y el Observatorio Astronómico, todos proyectados por otro de los grandes arquitectos del rey: Juan de Villanueva.