1947年6月,国民党主力和还乡团卷土重来,沂东县解放区沦陷,区干部被迫撤到滨海地区。陈世业随部分侦察员趁夜晚返回辖区了解敌情,群众都向他们哭诉敌人的暴行,有个村子的女党员被敌人脱光衣服绑在树上,轮奸后又用刺刀刺死。侦察员们强忍怒火安抚群众,摸清村里的坏份子,当晚就将一个告密的汉奸就地枪决了。
建国前夕,陈世业随部队到达浙江省临安县,组建公安局并担任侦察股长。1949年4月,国民党残匪十八支队还盘踞在大王山一带。有一次,陈世业和县工作组几个人在大王山被这伙土匪包围了,他们三个人爬到了山顶,其中一名区干部还不敢扔手榴弹,只有陈世业持驳壳抢,一名排长扔手榴弹,抵抗了半个小时后,增援部队赶来终于解围。
新中国成立后,他陆续担任过浙江省安吉县公安局长、桐乡县公安局长,1954年到华东公安学院学习,毕业后分配到浙江公安厅一处任副处长,1958年"大跃进"期间相继在绍兴铜矿、龙游硫铁矿担任负责人,次年调任公安厅劳改局副局长。文革后,他担任过浙江省公安厅治安处副处长、政保办处长等职务,1985年离休。