兼侍读学士。崇祯五年（1632年）擢礼部右侍郎。崇祯六年（1633年）升礼部尚书，任大学士兼代理首辅。因与文震孟为给事中许誉卿辩护，为温体仁讦奏，罢归。弘光元年（1645年）清军陷南京，唐王朱聿键召任首辅，与郑芝龙不合，顺治三年（1646年）十一月，与大学士苏观生等在广州拥立绍武帝，有足疾，后绍武帝殉国，遂回广东，是年十二月十五日，清军攻入广州，吾驺投降。称疾还乡，卒于家。
着作及书法.着有《元气堂诗文集》三十卷、《云芨轩稿》二卷、《经筵日讲拜稽集》四卷等。又工书法，以李邕为骨，以