繁灏生于嘉庆十一年（1806年）二月初二日午时，道光二十一年（1841年）袭封衍圣公。道光三十年（1851年），清文宗咸丰帝即位，孔繁灏进京庆贺，陛见七次，获赐御撰《朱子全书》、《渊鉴类函》、《历代通鉴辑览》等书，及文宗亲题「德齐万载」匾额一幅。同年，洪秀全起事，席卷华南。孔繁灏积极捐输，支援清廷。咸丰三年（1854年），清文宗至太学行「临雍大典」，释奠先师孔子，孔繁灏率领颜、孟、曾等家族的世袭五经博士进京陪祀。钦赐朝帽朝衣缎匹等，晋太子太保，赐给御制诗章。同年，捻军兵临曲阜，孔繁灏亟令守卫百户，小心防范，