I 1601 ble Oluf forlent med , men allerede våren 1608 døde han. Han ble etterfulgt som lensherre av Klavs Kagge.