暗语：“太阳下山，快收衣服！”
几番调查了解后，吴以怀帮助恢复了暂时与党组织的失去联系的朱植夫、黄湧、吴孔章等人的组织关系，在敌占区建立起了地下党小组。之后在敌占区不断发展党员。从1940年到1942年发展的新党员有李永安、王安怀、周业贞等12人。
1942年前后，党员开始频繁在敌占区发展地下活动，发动群众成立了青抗会、妇救会等秘密组织，吴以怀带领党组织通过青抗会、妇救会等发动群众捐款，购买军需物资。
更多的时候，他们以开设的“日华茶店”为隐蔽点，开始了“白皮红心”的地下工作。
“茶店白日里正常营业，甚至也接待过日本兵，但从雇员到服务员都是党员，组织信得过的人。”吴以怀回忆，当时为了麻痹敌人，了解到日军喜欢喝浓咖啡的习惯，他们在敌占区茶店里做起了泡咖啡的生意，一时间还招徕了不少顾客。但夜里，这里便是传递红色信息的“根据地”。
经过长时间的“运作”，吴以怀让党员周业贞打进了港门维持会当秘书，让抗日家属吴家通在墩头当了保长，还有几名党员也安插在了港门、新街当保长。当时大家都有明确的分工，为党组织侦察敌情，通风报信，观察敌人的一举一动，而吴以怀，就带领其他党员，根据送来的情报，不断地制定克敌运送物资的对策。
在敌占区的工作，一切联系都是“单线”的。吴以怀回忆，1940年6月18日党小组遭遇到了一次危机。当天夜里，吴以怀通知了新街的戴泽运、墩头的吴孔章、港门的周天予深夜11点在剪半园村杨其荣家中开会，布置工作。但很快听到“咚咚……”一阵急促敲门声。
吴以怀打开门，是周业贞托人送信，字条上是完全的暗语：“太阳下山，快收衣服！”这是报警的暗语，意思是鬼子今晚要进村巡查。
情况突然变得紧急，吴以怀当机立断发出“单线”通知：“天下雨，不能晒鱼！”，暗语取消当晚的会议。
据吴以怀回忆，当时的地下工作中，他们定期变化暗语，比如大鱼小鱼来形容敌人的多寡，下雨和不下雨来暗示是否周围有敌人，还有询问是否有盐巴，都由吴以怀发出指令，再单线通知出去，吴以怀并不认识他传递暗语之外的共产党员。
即便如此谨慎，提前接到了讯号，18日当晚，吴以怀还是在出村的路口，在小茶店的拐角处被日军搜身，一双手臂从身后紧紧拦腰抱起。
“他们从口袋里摸出了我一直带在身上的《大东亚共荣圈》，盘查过后，用手电光在我脸上晃了又晃，之后抱住我的手才松开，放了行。”
“脱险了，我迈开脚步镇定朝前走去。”
就在一片白色恐怖下，吴以怀等党员坚持在敌占区发动群众巧夺敌人物资，支持抗战，1941年夏天，在吴以怀的配合下，短枪班击毙了新街大汉奸卢汉川；在吴以怀送出的准确情报下，琼崖纵队带领群众夜袭日寇的三井洋行，缴获了大量步枪、布匹；吴以怀在敌占区还组成了缉私队，在近海截缴日军运粮木船，缴获粮食数千斤，一度令鬼子昼夜不安。但到1942年，因身份暴露，吴以怀撤出了敌占区，从此转战正面战场，开始了另一番革命的戎马生涯。（记者 杜颖 实习生 王莉雯 通讯员 张玲）
 |
