生年不詳，一作敬王十五年生，母乃從妾，又是翟人之女，是故，其於諸子中名低，位最下之庶子也。於其幼時，甚至連簡子亦薄之。然，襄子幼而敏而好學，膽識過人，不似諸兄紈絝，久久，為趙家臣姑布子卿之意。子卿素以善相信於簡子焉。一日，簡子召諸子來，請子卿相之，子卿遂舉毋恤矣。簡子素重子之教與養。嘗以訓詞，書於竹片上，分授諸子，責其認真習讀，悟其旨也。並告之三年後逐一考之。然，於考時，其諸子，連世子伯魯，亦誦不出，乃至竹板亦不知失於何處焉。唯毋恤謂板上之訓誦如流，而終以竹板攜藏身，常檢點自身焉。於是，趙鞅始信子卿所薦，以毋恤為賢也。及諸子成，簡子又為之深之考也。一日，其召子曰：「吾將一符藏於常山上，汝等去求乎，先得者有賞。」於是，諸子馳往，尋寶符於常山。然而，其莫得符，只得空手歸焉。唯毋恤曰：「吾得之寶符。」趙鞅聞聽令具狀道之。毋恤曰：「以常山之險攻代，代可歸趙焉。」簡子悅異，頓覺唯毋恤明己之心，乃趙大業之後者也。遂廢世子伯魯，特立毋卹為世子。