中山虽是县制,但因是中山先生的故乡,名门大族集中,且行政上自治,地位特殊,经费充裕,也并非一般人所能染指。唐绍仪本是中山人,不嫌官小,欣然前往担任县长。不料好景不长,唐绍仪得罪了两广实力派人物陈济棠,连个小小的县长都做不稳,后来矛盾激化,被排挤出广东这块地盘。他原本志不在此,从中山县长任上退下来后,干脆来沪做寓公。
日本侵略军当局在占据上海后,便打起了唐绍仪的主意,秘密制定所谓“南唐北吴计划”,其主要内容是“起用唐绍仪及吴佩孚等一流人物”,“建立和平政权”,以取代蒋介石为“谈判”对手。在华的日军大小特务,纷纷奉命出动,从各方面加紧策划,很快,唐绍仪与日本特务秘密接洽的流言就传开了。
9月下旬,日本驻中国特务机关长、老牌特务土肥原来上海,想与唐绍仪秘密接洽合作计划,劝其出山做总统。那天,土肥原由唐的“乘龙快婿”、清末两广总督岑春煊之子岑德广陪同,坐车前往福开森路唐宅。岑由日本贵族学校出身,此时早已在上海落水,因精通日文,故由他兼任翻译。据史料记载,在这次会谈中,土肥原曾小心翼翼地试探:“阁下能否起草一份"和平通电"或"和平救国宣言"?这是我们建立新政权的第一步。”至于这次会谈的内容和结果,迄今不得而知。
土肥原对唐绍仪有兴趣,并非他仅是一个值得抬出的大人物,而是认为他有一定的亲日思想和泛亚主义情绪。两人早在抗战前就有交往。
潜伏在上海的军统特务,自然不敢懈怠,对唐绍仪的一举一动,监视严密。军统头子戴笠见到手下送来的唐有落水可能的情报,喜出望外,以为有了一个重大的除奸对象,一面立即把情报转呈蒋介石过目,一面又命令手下加紧监视,哪怕鸡毛蒜皮之事也须一并报来,不得延误。
蒋介石得知唐绍仪与日本人接触频繁,十分不悦,但又有所忌讳。唐绍仪虽已退出政坛,但毕竟是国民党元老,如果果真落水,岂不坏了国民党政府的名声?但仓促下杀手,又查无实据。遂先礼后兵,通过各种关系,对唐进行笼络,馈赠津贴,委以官职。唐的另一个女婿诸昌年,也受指使来沪,劝其脱离日伪包围,移居香港,若能先到武汉,当委以外交委员会主席之职。