有线主持《2006有线世界盃嘉年华》。2006年10月，转投TVB，主持《价啱畀你》。但自2006年下半年，杜汶泽被传因口不择言开罪无数演艺圈的艺人（吴君如，曾志伟，刘德华，容祖儿）、电影导演（杜琪峰）、商业电台副主席（俞琤）与寰亚电影公司的老板（林建岳）而引致事业开始走下坡，相继被商业电台解僱并失去广告代言人资格。至2007年底，更有杂志指杜汶泽被业主刘德华下令收回租住豪宅的业权，被迫迁出布力架街豪宅。后来杜汶泽出席刘德华的演唱会做嘉宾，在舞台上表示与刘德华没有不和。历经事业低潮的杜汶泽其后笃信佛教，