Han ble født i en gammel, aristokratisk familie. Hans grandnevø Decio Azzolini den yngre ble også kardinal.