父施振兴前往日本留学，后来启发史明喜欢上西洋古典音乐。在小时候，史明由外祖母贴身照顾，过程中听到许多口述历史，但也被母亲严格管教。1926年，史明原本要与其他台湾孩子一起就读台北州的士林公学校，但是因为母亲的特别请託，后来他转进以招收日本学童为主的台北市建成小学校，并于1932年毕业。而在1933年，他进入旧制五年制的台北州立台北第一中学校就读，当时积极参与校园中的「硬派」学生队伍，并表现出浓厚的反抗日本情绪。
日本留学.1936年3月，尽管母亲希望其就读医学院、从而成为医生，