Hoskuld kom tidlig ut i en alvorlig strid med abbeden på Utstein kloster. I 1515 beklaget abbed Henrik av Utstein seg for kong Kristian II over den behandling, han og hans kloster hadde lidd av biskop Hoskuld. Henrik var blitt ført til Stavanger og satt ”i tårn og jern” i blodig tilstand. Hoskuld hadde beskyldt Henrik for å være kjetter. Han sendte også sine folk til Utstein og arresterte en kvinne. Hoskuld torturerte henne og fikk henne til å lyve på Henrik og seg selv. Så sendte han kvinnen til Sverige. Kongen påla seks geistlige å dømme i tvisten, men en kjenner ikke hva dommen gikk ut på.