Desde o , os condes de Foix, entre eles Gastão III Febus (1343-1391) foram abandonando progressivamente o castelo, devido a sua falta de confortabilidade, em proveito do Palácio dos governadores (o atual tribunal) da cidade de Pau, a capital do viscondado de Béarn. A partir de 1479, o conde de Foix assumiu a coroa do reino de Navarra e o último deles, Henrique IV, rei da França em 1607, anexou à França em 1620 seus territórios da Baixa Navarra, que a Espanha não havia conseguido controlar após a Conquista de Navarra.