I 1864 ble Peter Blom hadde blitt utnevnt til sogneprest i Valle i Setesdal. Etter 16 år i Setesdal, flyttet familien videre, da Peter Blom i 1880 ble utnevnt til sogneprest i Vardal ved Gjøvik.