同治五年（1866），经过长期准备，周密布置，义军向清军展开大规模的进攻。二月十三日，潘新简、吴邦吉和潘老帽，率九阡及下河义军准备进军广西。后来改变计划，率四万余众，从方村分五路围攻荔波县城。为防止都匀、独山方面的清兵增援，潘新简亲自领兵数千人截住北部通道。荔波告急，都匀知府兼独山知州吴德容，急忙派贡生黄金品领兵解救，行到途中，余被义军歼灭。贵州巡抚又派卢希恒从定番（惠水）领兵增援，又被义军堵截，掉头鼠窜。吴德容见出军屡遭挫败，迫于无奈，又派大儿子即补知州吴江率千余人，从花钵大路向荔波开进。潘新简命令义军四下埋伏，然后自己领兵直捣吴江本营。经过激战，潘新简佯败，诱敌进入埋伏圈，吴江丧命，全军覆没。3月25日，被义军围困了42天的荔波县城终被攻破。即补知府荔波县彭培垣投水自尽，游击范定邦、守备刘学武、训导翰林院孔目赵旭，署典史寿其仁等反动官吏五十多个被击毙；县城的清军全被歼灭。这是义军起事12年来，杀死清反动官吏最多的一次。潘新简委任布依族周朝量为县令，封周期桢、覃玉梅为帅，治理荡波县。这次攻城胜利之后，潘新简率众把城墙全部捣毁，然后才班师回九阡。