属下的官员们大声地说道：“隋炀帝骄奢淫逸、贪渎民财，司农署非得有你不可。现在皇帝自身节俭爱护民众，你又有何用呢！”赵元楷听后十分的愧疚。638年二月二十，唐太宗巡视到蒲州，刺史赵元楷命令百姓们身穿纱单衣迎接车驾，装饰廨舍楼台观宇，又养了一百多头羊、数百条鱼献给贵族外戚。太宗责备他说：“朕巡行到黄河、洛水一带，凡有所须，均从府库中支取。你所做的乃是已灭亡的隋朝的老毛病了。”侯君集征高昌时，坐马的前额被虫子咬伤，行军总管赵元楷用手指沾脓，用鼻子闻其臭味，御史上奏弹劾赵元楷谄媚，降职为栝州刺史。