Rakkebåene og fyret Svenner er kjente landemerker i skjærgården utenfor byen. Larviksfjorden fører fra Skagerrak inn til byen.