才察觉到了胡季牦的权势太大，对陈朝的皇位构成了威胁。但此时胡季牦的权势已经凌驾于艺宗之上，艺宗根本无法制之。为了防止胡季牦将来篡夺皇位，艺宗命画工画了四辅图。该图描绘了中国历史上周公辅佐周成王、霍光辅佐汉昭帝、诸葛亮辅佐蜀后主，以及越南历史上苏宪诚辅佐李高宗的故事。艺宗将其赐予胡季牦，要求他忠诚地辅佐陈朝皇帝。不久又召胡季牦入宫，从容地对胡季牦说：“平章亲族，国家事务一以委之，今国势衰弱，朕方老耄，即世之后，官家可辅则辅之，庸暗则自取之。”胡季牦听到此话后立即免冠叩头谢恩，同时指天地誓曰：“臣不能尽忠戮力官