阿尔比地区早在青铜器时期就已出现人类活动，高卢时期为的活动范围。罗马人入侵后，塔恩河的航运得到开发，但由于该河上游多峡谷湍流，不利于航行，故阿尔比所在地成为了一个水旱转运码头，并逐渐形成城镇。公元418年，西哥特人入侵这一地区，后于507年由克洛维一世收复。中世纪初期，阿尔比修建了城墙，但在公元666年的一场大火中被完全烧毁，后逐步恢复重建。公元11世纪，阿尔比建成了第一座横跨塔恩河的桥梁。公元12至13世纪间，卡特里思想传入阿尔比，并在当地获得广泛认可，故而卡特里派又被称为“阿尔比派”。公元13世纪，教宗宣布阿尔比派为异端，并组建阿尔比十字军，开始对阿尔比在内的法国南部地区进行了大规模的讨伐，基督主教及枢机在占领阿尔比后修建了及圣西西里主教座堂，以此重建宗教的权威。十五世纪时，受到加尔文主义的影响，法国南部再次出现宗教矛盾，并引发宗教战争；同时受到黑死病疫情影响，阿尔比人口数量急剧下降，出现了极大的衰败。1598年，随着纳瓦尔国王亨利四世继承法兰西王位，阿尔比地区正式成为法兰西皇室领土。十六世纪文艺复兴时期，阿尔比地区引进大量菘蓝，带动了当地的农业及社会经济发展。法国大革命结束后，阿尔比地区成立塔恩省，省会最初定为卡斯特尔，后于1797年迁至阿尔比。19世纪，阿尔比北部的卡尔莫发现了煤炭资源，使其成为了一个区域性的能源工业中心，连接两地的铁路线于1864年建成，后逐渐延伸至图卢兹。2010年7月31日，阿尔比老城被列入世界文化遗产名录。