O edifício foi residência ainda de Fulvio Giulio della Corgna, cardeal-sobrinho do papa Júlio III, até sua morte em 1583. Em 1571, morreu no palácio o irmão mais famoso dele, Ascanio della Corgna, recém-chegado de sua vitória na Batalha de Lepanto com a Marinha Otomana.