唐宣宗听闻他的才气后有意提拔，但在读到其《题秦诗》“徒知六国随斤斧，莫有群儒定是非”二句后感到不悦；赵嘏因此失去升迁机会。大中年间，他在担任渭南县尉后退休。
文学造诣.他专精于作诗，有“长笛一声人倚楼”诗句盛传于当时，并为杜牧所激赏，时人称“赵倚楼”。