南部尚书娄拔（一作娄壮）子，北齐神武明皇后娄昭君之侄。
生平.娄叡幼孤，被叔父娄昭所养。年轻时善骑射，有武干，开始作为高欢帐内都督。魏孝武帝太昌元年（532年）于韩陵之战从高欢破尔朱氏，转任开府仪同、骠骑大将军，封掖县子。累进光州刺史，后改封九门县公。北齐立国后，授领军将军，别封安定侯，为瀛州刺史。天保七年（556年），讨破鲁阳蛮。皇建元年（560年）以外戚封东安王，任丰州刺史。齐孝昭帝大宁元年（561年），进位司空。齐武成帝河清元年（562年）高归彦在冀州叛，娄叡镇压有功，拜司徒。