Det naturlige sentrumet på Sørsiden er Søndre torv. I dag er dette området preget av murbygninger bygget i tidsrommet rundt år 1900, men det finnes fortsatt rester etter den gammel trehusbebyggelsen rundt torvet og i St. Olavs gate. De fleste trehusene har blitt restaurerte og er godt bevarte.