Haugvaldstad reiste i 1810 inn til Stavanger, han overlot gården til sin hustru som ikke ville flytte med. Der bant han fiskegarn og begynte litt notbruk og sildehandel. Etter å ha tjent en del, reiste han til Kristiansand, hvor han var i farvelære hos haugianeren Knud Jacobsen. Og omkring 1816 nedsatte han seg som farvermester i Stavanger, hvor han ble en dyktig næringsdrivende. På sine reiser i Danmark og Sverige hadde han studert flere maskiner. Da han som farver ikke kunne sysselsette alle menneskene som kom og ba om arbeide, utvidet han etterhvert sin bedrift til å omfatte bakeri, bondehandel, veveri, spinneri, bridselmølle, sildesalteri og gårdsbruk. Opptil 30 mennesker hadde stadig sitt brød hos ham. Han hadde også et skip som seilte til Fyn og Gøteborg med fiskevarer og hjemførte rug m. m.