.东汉元嘉元年（151），上虞县令度尚改葬曹娥于江南道旁，并立曹娥碑，碑文由邯郸淳所写，传蔡邕曾夜读此碑，并题“黄绢幼妇，外孙齑臼”八字字谜，后为杨修所解（谜底为“絶（绝）妙好辤（辞）”），今庙内所存曹娥碑则为北宋元祐八年（1093）由蔡卞摹旧时碑文重书。庙址初在曹娥江东岸，后迁西岸。北宋熙宁十年（1077）载入祀典，有司春秋祭祀，元祐八年（1093）建正殿八间。大观四年（1110）封曹娥为灵孝夫人，后因借潮而应不断加封，南宋嘉定十七年（1224）在庙后增建曹府君祠祀其父母，淳祐六年（