班穉是班况的少子，班彪的父亲，班固、班超、班昭的祖父。他的姐姐是班婕妤，年轻时担任黄门郎中、常侍。汉成帝末年，想要册立定陶王刘欣为太子，多次遣使问近臣，只有班稚持重谨慎不言。汉哀帝即位，让他出朝为西河属国都尉，转任广平相。王莽年轻时与他哥哥关系友善，汉平帝即位，王莽专权，班稚方直自守，因为不颂王莽功德被弹劾不道，依靠太后卫护得免。于是上书归印，入补延陵园郎。