子尚的抚军法曹行参军，及后又改任虎威将军、上庸太守。孝武帝亲任柳元景，亦欣赏世隆，故就以昔日柳元景曾获授的虎威将军号授给世隆。永光元年（465年），柳元景谋废宋前废帝失败被杀，世隆却因远在上庸而倖免于祸。泰始二年（466年），刚刚才因杀前废帝登位的宋明帝面临全国大部州郡皆支持晋安王刘子勋政权的困境，柳世隆认为自己早前得免于伯父之难是因明帝之故，故此就在上庸起兵支持明帝，并与刘僧驎联结了一万人进逼襄阳的万山，却为雍州行事孔道存击败，世隆部众离散，被逼躲起来。孔道存大举缉捕世隆，世隆的母亲郭氏和妻子阎氏都被