En 1363 se casa con la reina Juana de Nápoles, por lo que pasa a ser duque de Calabria y rey consorte, de la que se separa en 1366 (no hay nulidad del matrimonio, pero Jaime abandona la corte napolitana).