）是母亲的娘家姓，两人于1735年从威尔士锡尔迪金的特雷加伦（）移民来到美国，艾萨克是他们的第三个孩子，也是第二个儿子。谢尔比家族历史上忠于英国国教会，但在到达新大陆后，他们转为信奉长老宗，这也是艾萨克·谢尔比终身的信仰。艾萨克在家乡的殖民地学校接受教育。他在父亲的种植园干活，偶尔还有从事测量员的工作。18岁那年，艾萨克成为弗雷德里克县的副警长。艾萨克的父亲经营着利润丰厚的毛皮贸易，但庞蒂亚克起义对业务构成严重干扰，导致他损失惨重，两年后，业务的商业记录也在一场大火中被毁。1770年12月，谢尔比家族迁