有了第二个儿子的蒋淳斌固然高兴，但他并没有因此而耽误消灭张士诚的步伐：至正二十六年中，蒋淳斌发精兵二十万，命徐达为主帅，常遇春为副帅，集中精力消灭张士诚。
这次蒋淳斌并没有让徐达等人直接攻打张士诚的老巢平江，而是令他们先取湖州，因为他知道张士诚善于守城，更何况这两年来张士诚一直在修城墙，自己绝对不能先啃这块硬骨头。
更何况如果自己先打平江，那么张士诚派驻在湖州、杭州等地的守将定会来援，到时候腹背受敌，情形就不好说了。
当初蒋淳斌与陈友谅为敌时，之所以急着攻打江州，就是想要速战速决，因为还有张士诚等势力从旁觊觎，不稳定的因素太多。
可现在蒋淳斌完全可以一心一意地对付张士诚，而不用考虑其他问题，所以他并不急着攻打平江，而是决定采取稳扎稳打的方式步步蚕食。
于是蒋淳斌一面命徐达、常遇春率大军进攻湖州，一面令廖永忠率军攻打杭州，冯国胜攻打嘉兴，以此牵制住张士诚的兵力。
守备湖州的兵士虽多，但主将潘元绍却是个没本事的，平日里只不过仗着自己是张士诚的女婿，所以才颇受众人吹捧。
而且潘元绍此人酗酒嗜杀，贪财好色，虽然娶了张士诚之女隆安公主，却还另外豢养了七位美姬，实在可以说是人渣一枚了。
更重要的是，这个潘元绍行军打仗确实不在行，因此虽然湖州城坚兵精，但在徐达和常遇春大军的雷霆之击下，坚持了不到一个月就面临城破的危机了。
这时候潘元绍再次展现了自己的渣男本质：他竟以城池将破，未免姬妾受辱为由，逼着他的七位美妾上吊自尽了。
当然，徐达和常遇春确实没有辜负潘元绍的期望，在他的美妾们自杀的当天，徐达和常遇春便率大军攻入了湖州城，并生擒了潘元绍。
于是一个月前还高呼着“必定坚守湖州，誓与城池共存亡”的潘元绍转脸就向徐达和常遇春投降了。
常遇春经过蒋淳斌的多番警告，此时已经不敢再擅自杀降了，于是便派人前往集庆，询问蒋淳斌该如何处置潘元绍。
蒋淳斌自然看不上潘元绍这等靠女人起家的货色，于是便询问使者这个潘元绍到底有何才能，结果使者憋了半天，方期期艾艾地答道，说徐大帅进城时，与潘元绍见了一面了，只是和常副帅感叹：这小子倒是生了副好皮囊！
蒋淳斌听罢，不由得哈哈大笑，果然是给人做女婿的，长得不好看确实是不成啊！
恰巧此时蒋淳斌面前有一面铜镜，于是揽镜自照道，“我与那个潘元绍相比，谁更帅一些？”
听到蒋淳斌这样问，使者不由得愣在了那里，半晌过后方吞吐答道，“汉王殿下姿仪雄伟，岂是潘元绍这等小人可以比的？”
蒋淳斌见状，又是一阵大笑，同时大手一挥道，“告诉徐达，把潘元绍的脑袋剁下来，扔到粪坑里，老子就是不喜欢长得比我帅的！更何况还是个没良心的！”
“汉王殿下…”，对于蒋淳斌的命令，使者似乎还有些没反应过来，“徐大帅说湖州城内还有不少降兵…”
“告诉徐达，我可不养潘元绍这等废物！”，蒋淳斌摇摇头，态度似乎挺坚定，“更何况今时不同往日，杀了潘元绍，我也镇得住手底下这帮降兵！”
蒋淳斌确实可以有这种自信，因为徐达依令杀了潘元绍后，并没有在湖州城内引起什么骚乱。
而随着湖州的平定，冯国胜也顺利攻下了嘉兴，至此只剩下杭州城还在顽强地抵抗。
攻打杭州的进度之所以那么慢，倒不是因为廖永忠的领兵能力太差，而是由于驻守杭州的守将太强，他便是张士诚如今手下的第一大将吕珍。
张士诚连失湖州、嘉兴两城，自然是更加重视杭州的地位作用，于是迅速派兵来援，却被徐达半路设了伏击，杀得大败而归。
常遇春和冯国胜见廖永忠久攻杭州不下，先后分兵来援，廖永忠对此也不推辞，只是对杭州城的攻击愈发猛烈。
又经过了一个月的周旋，杭州城内弹尽粮绝，吕珍数次率军突围未成，只得开城投降。
拿下杭州城后，廖永忠看起来一点也不兴奋，反而在众人面前提着一把大刀，直接冲到吕珍面前将他从地上揪了起来。
冯国胜见状不妙，连忙上前拉住廖永忠道，“老廖，别冲动，汉王殿下吩咐过了，万事须得先禀报于他！”
“老子等不及了！”，廖永忠猛地挣开冯国胜，将作势欲逃的吕珍一脚踹倒在了地上，“我今天非杀了这个王八蛋不可！”
“老廖，我这是为了你好！”，冯国胜仍不罢休，只是一个劲儿地去拽廖永忠，“我当初就因为擅自杀降，被汉王罚去种了两个月的地！”
“可你为你哥报了仇，你心中绝对是不后悔的！”，廖永忠红着眼眶，猛盯了冯国胜一眼，“但我哥的仇，什么时候报？”
冯国胜终于想起来了，当初廖永忠的哥哥廖永安就是为吕珍所擒，但蒋淳斌拒绝用俘虏的张士德交换廖永安，结果廖永安最终死于狱中…
“老冯，今天我要是不杀了他，我会后悔一辈子！”，廖永忠说罢，便举起大刀，一下劈在了吕珍脑袋上，鲜血溅了他一脸，“就算汉王殿下如何罚我，我也认了！”
冯国胜见吕珍已死，便摇摇头叹口气道，“老廖啊，今天这事儿…就当我没看到…”
“哥啊，我终于为你报仇了！”，廖永安大啸一声，仰天长叹，随即又提着刀走出了门外。
“诶，老廖，你还去干什么？”，冯国胜在后面喊一嗓子，“先接收城内的降兵啊！”
“吕珍的家人，我一个也不会放过！”，廖永忠攥紧双拳，回过头瞥了一眼地上的尸体，在心中默念道，“吕珍啊，这笔账…我只能记在你的头上！”