遥远等待之。他抄岔道西上，任约认为他怕自己而退后，立刻追赶，在南安芊口，对胡僧祐说：「吴儿，为何你不投降？走到哪儿去。」他不理睬任约，偷偷退却，至赤砂亭适逢陆法和到达，二人一同击破任约，擒拿任约到江陵，侯景得知后逃去。萧绎任用胡僧祐为侍中、领军将军，回到荆州。其后他拜任领军将军，积累许多财物，所得的仪仗经常放在斋中，对自己自娱。别人说：「这是羽仪，你名声隆重，不应这样。」他回应：「我喜欢这样，不用见怪。」出游时亦随身携带仪仗，别人都笑他。承圣二年（553年），胡僧祐进官车骑将军、开府仪同三司，其他依旧。