Berge var en aktiv maler i hjembyen Stavanger, og en omfattende produksjon av maleriene spenner over et vidt spekter av motiv. Han bidro til en rekke separatutstillinger og kollektivutstillinger, hovedsakelig i Rogaland. Berge var selv initiativtaker til et museum i Stavanger, , for å gjøre arbeidene hans tilgjengelig for publikum. I tillegg er han representert i Rogaland Kunstmuseum og Haugesund Billedgalleri.