他从政委被改任主任，弄得有些被动，想赶紧调离，2次反映无回音

1938年11月，上级将115师343旅685团改编为苏鲁豫支队，开辟湖西抗日根据地，任命彭明治为支队长，吴为政委，副支队长梁兴初，政治部主任王凤鸣。

湖西是微山湖以西，主要发展苏鲁豫一带根据地。

部队在苏鲁豫一带打仗，部队发展很快。根据形势发展，陈光代师长同意派部队到皖东北发展，政委表示要带部队去，支队长认为不妥，但代师长表示同意。就这样，支队分两路发展。

就在政委率领部队进入皖东北后，张爱萍也在这里搞统战工作，希望把这里抗日武装力量统一起来，但张爱萍基本上是独自去皖东北，吴带领的队伍给予很大支持。

也就是在这时期，湖西发生审查干部情况，不少干部受到影响，就连支队副支队长兼大队长梁兴初差点遭到不测。多亏罗政委及时赶到才阻止情况的发生，否则不堪设想。

当时，吴在皖东北，虽然作为支队政委表示并不知情，也没有人向他汇报，上级虽然没有怪他意思。但对他去皖东北提出批评，认为他是部队的政治主官，离开部队思想工作怎么办？

1940年2月，让吴没想到的是上级突然把115师保卫部部长朱涤新调来，问身边的彭明治对方来干什么，彭告诉他朱涤新来当政委，你曾对上级表示过，不愿当政委，愿当政治部主任，所以根据你的要求决定的。

为何把他从政委改为政治部主任呢？真是因为吴曾经说过这番话吗？湖西发生的问题影响很大，威信受到损害。上级说：“你是苏鲁豫支队的政委你离开大部分主力部队，单独带一支部队出去活动，这样做行吗?”言外之意，他虽然不知情，但作为政委离开主力，使得事情没有及时处理，反而影响很大，要不要承担领导责任呢。

当吴得知自己降职了，心有不愿，自己过去却是说过这样的话，认为当政委不容易，担子重，但最后当政委后工作开展的也算顺利。如今把自己降职，给上级发电报要求调动工作，甚至询问上级：突然把自己降职，这是为什么，语气很冲，很不冷静。可对方没有回电报。

后来，他又发第二份电报，再次重申要求离开苏鲁豫支队，自己觉得有什么问题一样，可组织又没找他谈话，不知道为何这样变动。结果上级依然没有回电。没办法，只能继续留在支队工作。新政委团结他，对方也是奉命上任，也不能怪在人家头上。

不过，他对上级的处理是有点意见，事先不找自己谈一谈，让自己很被动。

后来，黄克诚等部都来到皖东北，上级黄统一皖东北互不隶属都武装，成立八路军5纵，苏鲁豫支队改编为1支队，支队长彭明治，政委朱涤新，副支队长田维扬，吴仍为政治部主任。后来，吴提拔为5纵政治部主任，皖南事变后，5纵改编为新四军3师，1支队改编为7旅，吴担任3师政治部主任。