Segesd nem egy ízben menedékül is szolgált a királyi család tagjainak. Már IV. Béla, 1242-ben a Dalmáciából hazatérőben megszállt Segesden és a Muhi csatában sebet kapott nagybátyja, Kálmán herceg is itt pihent meg egy ideig. 1289-ben pedig, IV. László király neje, Anjou Izabella, vagy ahogy Magyarországon nevezték Erzsébet, a Nyúl szigeti kolostor rabságából szabadulva költözött Segesdre.