Clemente VI encargó a Jean de Louvres que construyera una nueva torre y edificios auxiliares, incluyendo una gran capilla de 52 metros de largo que servía de lugar de celebración de actos de culto papales.