Selve Byåsen er det største boligområdet i Rørvik, og sammen med fortsettelsen nordover, Svahylla, ligger disse boligområdene på høyden over byen, med utsikt over resten av Rørvik og Nærøysundet. Her finnes også forretninger og spisesteder.