Guttormsson bodde i Kálgarður i Sumba på Færøyene, men stammet fra Norge. Andreas Guttormsson er faren til Guttormur Andrasson, sin etterfølger i embetet.