I Roma var hans residens Palazzo Altemps. Han deltok i konklavet som valgte Julius III. Få måneder døde kardinalen; han etterlot seg fire barn.