Søren Anton ble født på Strømsø, og var sønn av skipsfører Magnus Andreas Poulsson og Marthe Johanne.