家中多子养不起被父母遗弃，祖母吴氏将他送给堂叔胡安国收养。宣和三年（1121年）中进士，次年娶妻张季兰，官至秘书省校书郎。金人立张邦昌为“楚帝”，胡寅弃官归家。高宗时，擢拔为起居郎。主张抗金，与秦桧不合。卒于绍兴二十六年（1156年），享年五十九。全祖望评：“当洛学陷入异端之日，致皭然不染，亦已贤哉，故朱子亦多取焉”。着有《读史管见》、《叙古千文》。朱熹的《通鉴纲目》引用很多致堂胡氏的断语。致堂胡氏即胡寅。