Adolf Gustav vokste opp i leiligheten over farens snekkerverksted i Halse, i huset som i dag har adresse Gustav Vigelands vei 20 i Mandal. Tilgangen til redskap og treverk gjorde at han tidlig fikk pusle med treskjæring. Stadige sykdomsperioder i barndommen gjorde at han ble skrevet ut av skolen og fikk bo hos morfaren på Mjunebrokka på Vigeland, i det som i dag heter Lindesnes kommune, hvor han fikk anledning til å dyrke interessen for treskjæring. Morfaren så at lille Gustav hadde talent, og han fikk den dyktigste treskjæreren i bygda, Tarald Lauen, til å gi ham undervisning i faget.