服从日军管治，在政商界具一定地位的李子方遂成为九名委员的其中之一。同年3月，日治政府再组织取代香港善后处理委员会，作为代表华民社会的谘询机构，李子方过渡到华民代表会出任该会四名委员的其中之一，使他进一步蒙上了背叛英国和通敌的嫌疑。其后，日治政府成立「香港竞马会」以取代香港赛马会，李子方即获委任为竞马会董事之一。日本在1945年8月宣佈无条件投降后，终标志着香港重光，香港遂恢复英国管治。战后，港府旋即强调李子方等是出于捍卫香港华人利益，并在得到英方秘密许可下，才接受出任日治政府的公职，当中并不涉及通敌卖国