Hadrias tilhørte en romersk adelsslekt som allerede to andre paver hadde tilhørt, Stefan III og Sergius II. Hadrian ble den tredje og siste. Innen han hadde viet seg til kirken hadde Hadrian vært gift.