Selv om kong Håkon anerkjente Agnes som sin datter, var det å være barn av gifte foreldre så avgjørende viktig at et fyrstelig ekteskap ikke kom på tale for henne, slik det ville vært så sent som på 1100-tallet. Men utover henne hadde kong Håkon ikke andre barn enn Ingebjørg, hans ektefødte datter.