Эпоха расцвета замка Бирон началась при бароне "Понсе де Гонто" и его брате Армане, "епископе Сарла" с 1498 по 1519 год; оба отмечены стремлением восстановить и приукрасить замок своих предков. Понс, будучи старшим сыном и, следовательно, военным, сопровождал короля Карла VIII в итальянском походе и пользовался расположением папы Александра VI, который в 1495 году благословил возведение в замке господской часовни. Арман, будучи младшим сыном, посвятил свою жизнь служению Церкви и, благодаря его стараниям Бирон, Сарла и Иссижак получили церкви и кафедральный собор.