灏却尽职于委办局务，并矫正攀附钻营的陋习，曾对人说：「盘根错节，乃别利器，才诚有之，品亦宜然。」五年（1866年），调办湖州府属双林釐局。在任二年，不妨害商民而维持釐金盈收。七年（1868年），署任浙江处州府庆元县知县。在县兴办学校，提倡教育，捐养廉银重修先农坛、武庙后殿门庑，加涂丹漆；又兴建善堂，设立义塾，赈济穷人。九月十一日，斋匪吴昌新以持斋礼神煽惑群众，在庆元县南乡山岱聚众起事，焚掠村落，胁迫子女。绍灏侦知情形后即调集营兵、招募民团乡勇，亲自率团迎击，督令士绅分队攻剿，得到乡民踊跃支持；斋匪顽强