Utover på 1200-tallet ble Gimsøy kloster en stadig sterkere maktfaktor i området. Samtidig utviklet Skien seg til å bli en by, med yrende liv og bebyggelse rundt havna og Mariakirken som lå midt i byen. Tidlig på 1300-tallet ble havna utvidet, og mange Hanseater, engelske og hollandske kjøpmenn seilte opp Skienselva.