南和塔恩省南部，距离省会阿尔比大约44公里。与卡斯特尔接壤的市镇包括：。
地形.卡斯特尔位于法国中央高原西南部，南侧为，北侧为，境内以丘陵为主，老城区地形相对平坦，全境海拔在151到367米之间。
水文.阿古河自北向南流经境内，老城区位于其右岸，该河是塔恩河的左岸支流，后者属于加龙河水系。此外由此于阿古河交汇。
植被.卡斯特尔属于温带落叶林区，市区内的主要绿地分布于阿古河两岸。
气候.卡斯特尔在柯本气候分类法中属