康熙二十五年(1686年)十月初一日(公历11月16日),胤祥出生于北京紫禁城,生母为敬敏皇贵妃章佳氏。自康熙三十七年(1698年)七月,十二岁的胤祥第一次跟随康熙帝去盛京谒陵后,直至康熙四十七年(1708年)九月一废太子事件发生前整整10年间,康熙帝只要离开京师,无论去哪里,必将胤祥带往。仅此即足以说明,康熙帝对他是另眼相看的。胤祥在雍正年间作为皇帝最得力助手的种种表现,也充分表明他除去具备较高的文化素养外,还颇有办事才力,善于协调人际关系,是难得的人材。胤祥能文能诗,书画俱佳,但流传至今的作品甚少。只有《交辉园遗稿》中少量作品流传下来。