符元年（874年）二月，赵隐在中书侍郎、刑部尚书任上被罢相，为检校兵部尚书、润州刺史、充浙江西道都团练观察等使，但仍保有同中书门下平章事的荣衔。
罢相后.赵隐在浙西，辟集贤校理张祎为宾佐。二年（875年）四月，浙西狼山镇遏使王郢等69员将领都取得了战功，赵隐给他们加荣衔，却没有给他们增加衣食补贴。这让将领们不满，他们唿吁增加补贴，但被拒绝。他们在王郢带领下反叛，劫掠地方。赵隐因管理失当，被解职改任太常卿。广明（880年 - 881年）初年，赵隐转吏部尚书，累加尚书左仆射。唐僖宗