Sem ble anlagt som en liten stasjonsby da Vestfoldbanen kom i 1881, og tettbebyggelsen som vokste opp rundt jernbanen og hovedveien ble kalt . Sem stasjon er i dag nedlagt, men har fortsatt anløp av tog.