После смерти Андроника III началась борьба за право регентства при 9-летнем Иоанне V (1341—1376, 1379—1391) между партиями матери императора Анны Савойской и ближайшего соратника Андроника Иоанна Кантакузина. Хотя в 1341 году Иоанн провозгласил себя императором, принцип легитимности требовал, чтобы при перечислении правителей империи он на первом месте называл имена императрицы Анны и Иоанна V и лишь затем себя и свою супругу Ирину. В 1346 году патриарх Иерусалимский короновал Кантакузина императором, однако такое венчание не считалось неоспоримо правомочным, поэтому 13 мая 1347 года состоялось повторное венчание на царство патриархом Константинопольским. Легитимность Кантакузина была закреплена браком его дочери Елены с Иоанном V. Таким образом, Иоанн Кантакузин выступил в качестве главы правящего дома. Стремясь закрепить права своей династии, Кантакузин выделил своим сыновьям самостоятельные владения. Однако когда Иоанн V при поддержке генуэзцев решил восстановить свои права, Кантакузин провозгласил в 1353 году соправителем своего сына Матфея, а Иоанн V не должен был более упоминаться при богослужениях и публичных торжествах. Однако в ноябре 1354 года Кантакузин был свергнут и пострижен в монахи.