Johan Sebastian Welhaven vokste opp i Domkirkegaten i Bergen. Faren arbeidet ved St. Jørgens Hospitals kirke, og engasjerte seg for hospitalets spedalske. Johan Sebastian Welhaven ble sendt på Bergen katedralskole med blant andre Lyder Sagen som lærer.