彼得堡的犹太人，他的姓氏“西格尔”是由源自白俄罗斯和乌克兰的“西格尔曼”转变而来的。当席格5岁时，全家人则是重新安定在加州橙县富勒顿（Fullerton），席格也是在那里的Buena Park高校就读。席格大约是在7岁开始接触武术，当时他由知名的系东流空手道大师出村文雄（Fumio Demura）以及美国西部合气道联盟主席罗得小林（Rod Kobayashi）指导，他在青少年时期学会了包括合气道、空手道、柔道以及剑道，后来他也成为了Demura空手道表演队伍的成员之一，并且在南加州的旧日本村落进行每日表演。