贞观十年（636年），后封为齐王，同时担任齐州都督。贞观十二年（638年），李祐进京养病，他的舅父阴弘智劝他募壮士以自卫。阴弘智推荐妻兄燕弘信辅助李祐，招募死士。李祐好游猎，结交奸邪之人，昝君谟、梁勐彪以善骑射得幸于李祐，太宗怪长史薛大鼎无方，改以权万纪为长史。李祐不思悔改，权万纪多次犯颜劝谏，斥退昝君谟、梁勐彪等小人，引起李祐的不满，李祐又立即将之召回，狎暱逾甚，权万纪与李祐关系闹得很僵。太宗又以校尉韦文振为齐王府典军。太宗命令刑部尚书刘德威前往齐州处理。刘德威经查明属实，要求齐王与权万纪返京说明。