Saicho ble født nær fjellet Hiei i en bondefamilie med kinesiske slektsrøtter. Saichos far var en meget hengiven buddhist, som blant annet ombygde sitt hus til tempel. En av Saichos forfedre trykket eller korrekturleste sutraer ved tempelet Tōdai-ji.