日本投降后，伪县长曾子南带领全县伪军约1800人接受国民党改编，曾子南任山东保安第二旅旅长，杜廷秀任参谋长。9月12日召开整编大会，宣布向“党国”效忠。月底，国民党兖州接收公署派汽车给曾部送来大批枪支弹药。
接受改编后，城中各色人物纷纷活动起来。国民党骨干分子刘千英公开发展国民党员，三青团头目田中瑞大肆宣传组织他们的力量，无论原来是什么牌号的汉奸，摇身变成丁国民党。这时，不断有人传话：说我是八路军的代理人，是城北共产党的坐探，早晚要逮捕我，我的处境日渐危急，
按照原定计划，我已完成了使命，应该返回革命队伍；义鉴于城中严峻的敌情，我通过王继升同志向县委请示去留问题。县委马上进行答复：八路军马上要对敌占区中的中小城市实行武装接收凡是靠近解放区的地方，要尽力收缴敌人的武器装备，扩大解放区。巨野城快要解放，你如果过早地撤出来，到攻城时另派人进去会更加困难。你要坚持到巨野解放前夕，带着敌人城防图出城。我决心执行县委指示，继续在城里坚持斗争。我认为：在反共方面，国民党与汉奸差不多，一定要认真对付。经反复考虑，我决定利用敌人的矛盾和弱点，看准时机靠上去。
国民党县长万恒祥来巨野后，见曾子南的旅部仍旧设在县政府，自己没地方住，只好等在城外。一个要住，一个不让，搞得国民党接收委员会主任姚念崇左右为难。我见机会已到，便与姚念崇说： “你这几天忙得差不多了吧？”
姚说： “唉！还有个大事哩，人家曾旅长不让地方。”
我说： “把县政府安在我合作社里怎么样？”
姚念崇一听非常高兴，大声地说： “那好啊！你可帮了我的大忙啦！咱可是说办就办，就让万县长他们住合作社吧。”
我点点头说： “没问题，我一定使你满意。”
1945年10月6日上午，万恒祥一伙进城，为了防．IJ：他们进城后翻脸不认人，我事先把魏荣振（对万家有救命之恩）和魏凤亭（万的师兄弟）请来，为我观敌瞭阵。一旦我有不测之兆，他们两个就出面担保。万恒祥进城后，见合作社门口贴着“欢迎万县长进城”的标语，很满意。下午召开了欢迎大会．会后，我安排万恒祥住我的宿舍，睡我的床：安排县大队长李念春住合作社办公室，办公生活用具配备齐全。县政府其他人员也都安排住下，我临时住在南屋库房里。县党部书记黄芝廷的人马被安排在老教堂里。这样进城的人员都得到了妥善安排。
晚上，我和魏荣振、魏凤亭由国民党县党部秘书长毕达三带领，到万恒祥处拜访。毕达三首先说： “今天晚上，我们到你这里来，主要是来看望您，表示敬意。”后又指着我说： “这是合作社的杨世香，为咱进城帮了很大忙，你住的房子，睡的床铺都是他的。”万恒祥出于客套，随着说：“添麻烦了，多谢。”
魏凤亭说； “不用客气，咱们是一家人，世香是我的徒弟，该办的事，他就得办。”
毕达三接着说： “要不是他积极筹办安排，县政府哪有个地方按呀，他迎接县府有功。”
“当然，当然，有情后补吧。”万在众人面前连连点头。我见说话投机，忙叫人上酒端菜，摆了一桌子，又把县大队长李念春请过来入席。我笑着说： “各位抗战8年，有苦有功，今晚备办薄酒一杯，权作接风。”喝完酒，我把伪合作社的两万块钱压在万枕头下面。第二天，万的态度不变，对我十分客气。
对县大队李念春，我叫开菜馆的魏乃文每顿饭都给李送两个菜一壶酒。李问魏， “是谁叫你送的？”魏说： “世香说李大队长没带家属来，生活不方便，天天忙着工作，身体熬坏了不行。叫我天天来送菜，账记在他名下，由他付钱。”李念春受感动了，主动到仓库找我表示谢意。他见我只铺了一张旧床，很寒酸，就说： “世香啊！你为迎接我们，把自己折腾到这里来了，我真有点过意不去。”我说： “大队长，咱这是谁和谁呀！不用客气。“李越说越高兴，拍着我的膀子说： 。走，上街转转去。”我见是好机会，满口答应，与他边走边谈， “亲亲热热”地上了大街。李一边走一边大声说： “兄弟，我老李也得够朋友，谁要是给你亏吃，跟我说一声；你要是有事不好办，就说是我李念春吩咐的。” “多谢了，要是有事，一定请大队长帮忙。”我也装作近乎随便的样子答道。一些国民党人员见我们亲热的样子，也都另眼相看了。
县党部书记黄芝廷也想捞些钱财，我拿出五万元托人转交给他，做为我对老师对党部的支持，黄收到钱后，高兴地对来人说： 。告诉他，好好地干，有事来找我。”
县委很关心我的安全，一再指示我：注意安全，千万不能大意。鉴此，每当我有事出门，就让李念春派县大队的人员陪着我，这样既方便又安全。
