两年零八个月后因被误会是狱中的青年犯，结果转职警察，驻守过黄大仙警署、西贡警署以及深水埗警区。其时香港未成立廉政公署，陈唯有以扫毒组警员身份游走于黑白两道三栋屋村，并在得到上司关照下广泛地建立人脉。渐渐经过毒贩网络接触更多黑社会层面的事宜，且成为香港三合会14K的“双花红棍”（从事狱警时期已由于希望有党派照应，方便工作而加入14K）。1960年代初入社会阶段开过武馆（教授自由搏击）。杂志曾报称他和日本山口组和志德组的成员关系密切。在电影中常扮演真我，语言刚烈，也以爱家庭、重义气，以及一套灵巧身手与快拳闻