Sin embargo, cuando Juana fue encarcelada en Nápoles en 1381, Jaime de Baux, nieto de Catalina y sobrino de Felipe II, que en 1374 se había convertido en emperador titular de Constantinopla, aprovechó la oportunidad y tomó Acaya.