Det tidligere merovingiske kongedømmet Aquitaine ble etablert på nytt av Karl den store for hans sønn Ludvig den fromme på 800-tallet. Et palass ble reist for ham i Poitiers (eller ombygget av et tidligere palass), blant mange andre. Det ble bygget på en romersk mur, som er datert tilbake til slutten av 200-tallet, på det høyeste stedet i byen. Ludvig oppholdt seg der mange ganger som konge og kom tilbake til palasset etter at han var blitt keiser, i 839 og 840. var spesielt karakterisert som et palass i regimet til Karl den skallede. Etter at karolingenes rike gikk i oppløsning ble palasset et sete for grevene av Poitiers, men i 1018 ble palasset fullstendig ødelagt av brann.