在1941年冬到1942年7月，日本侵略军对沂蒙地区大“扫荡”中，汉奸刘乃林曾两次任剿共大队长，在垛庄、尚店安设据点。为除掉这个民族败类，八路军曾两次拔掉其据点，但刘乃林都侥幸逃脱。

1943年10月，刘乃林在日军的指使下，又带领300余伪军，以“剿共大队长”的名义，从临沂窜回尚店重新安上了伪军据点。为坚决除掉刘乃林，彻底拔除尚店据点，沂临边联县公安局、敌工部、县大队，加强了对尚店据点和敌人内部的侦察了解，制定了“引蛇出洞”的战斗计划。确定由打入临沂伪警察署内部工作的刘长文到尚店据点送信，称胡子山日军东俄队长出来视察，在艾于湖遭到八路袭击，命令火速派人接应。待刘乃林前来接应时，县大队在公安人员的配合下，把刘乃林包围在艾于湖村内干掉。11月10日晚，县大队两个排在大队长李冠智的带领下进入艾于湖村。拂晓时，部队按计划开始行动。虽然，刘乃林中计被骗出来，但由于多方面原因，他又一次侥幸逃脱。

1944年1月18日，县大队得到可靠情报：刘乃林将在旧历腊月二十四日（阳历1944年1月19日）去胡子山给日军送礼。当天夜里，鲁中军区老四团便派出两个连的兵力和边联县大队一起，进入尚店东南临蒙公路上的井泉庄，以两个连在井泉庄担任正面伏击，县大队和其他武装在井泉庄以南的吴家庄一带和艾于湖村东及尚店以东担任侧翼伏击。1月19日凌晨，刘乃林得到井泉庄已有部队埋伏的消息，但他轻敌，认为仅是一些土八路，战斗力不强，仍按原计划行动。中午，刘乃林出动200多人，兵分三路，自己率一路沿蒙河东岸南行；一路居中走艾于湖公路；一路沿艾于湖以东前进。三路相互依托，朝青驼前进。当南路一部沿蒙河行至吴家庄时，首先遭到袭击，刘乃林便窜上公路，集中三路兵力，亲自指挥朝井泉庄攻击前进。井泉庄的主力部队待敌进入伏击圈后，乘势发起冲击，伪军少数被打死，大部被俘，刘乃林率部分伪军朝艾于湖村东逃窜。途中刘乃林被打伤并被活捉。沂临边联县武委会主任曹作义代表人民把刘乃林就地枪决。参战部队于当天下午拔除了尚店据点。