他觉得这宋工县的人实在不知好歹，于是下令分兵去攻打县城。
李兄虎大军进入山地不久就遭到了伏击，也不知道是哪里来的那么多兵马，十面埋伏一样，打的李兄虎措手不及。
一场惨败，李兄虎二十万大军杀出重围的不到五万人，他狼狈向北逃窜。
这时候才得知，越州已经不是他曾经认识的越州。
原来被他当众处死的越州节度使关浩然之子关亭候，趁着越州无人镇守的时候，发动楚国旧军，已成气候。
关亭候不过二十岁年纪，可此人性格沉稳，而且因为家世缘故，自幼饱读兵书，极有才能。
他设下连环计，让李兄虎进越州之后放松警惕，这才有了如此惨败。
李兄虎往北败退，关亭候率军一路追杀。
这时候，原本回来这一路上夹道欢迎李兄虎的那些人不见了。
所过之处，各城闭门不开。
此时的李兄虎才知道敌人计策狠毒，他进越州之后，错觉自己依然威望十足。
大军到的地方皆有人安排餐饭，他手下谋士谏言，说反正到哪儿都会提供粮草物资，何必带着大量的辎重前行，反而会拖慢大军行进速度。
可是战败之后，李兄虎军中无粮草可用，各城都不开门，他又不敢攻打，一旦被后边的敌人追上，他怕是难逃一劫。
就这样且战且退又走了七八天，大军已经断粮，又到了纬江，南下的时候这里有船只争相接送，可此时江面上却不见一船。