福林解职回乡，之后退隐以务农渡日；在香港及广州都有农庄，平时居住香港大埔区的「康乐园」（该处在1980年代后改建成住宅区）。1938年，日本策划进攻广东时，曾试图透过李福林收买广东将领，意图在虎门登陆进攻广州。李一方面报告军统，又透过陈策将此事报告余汉谋，李、余二人合演反间计，击毙数百名登陆日军及汪军。李福林因此获青天白日勋章。日军攻佔香港时，先遣部队即前往大埔搜捕李福林。李刚巧于前晚往九龙饮酒未返，即离港到重庆。1949年，在国共战争期间广州被中共佔领前夕，李全家迁往香港。1950年代初，赴台湾开