将章雕、长史虞良等人皆徐州豪强势力，二人尚心向汉朝，为人忠正，竭力辅助伍文忠，尚可以弹压徐州豪强，镇住局势。然自伍文忠病卒后，徐州又为伪燕夺取，占据数年之久，伪燕为拉拢徐州人心，遂放任权力，听凭徐州本土豪
强自治，于是豪强实力膨胀厉害，把持各州政务，染指军事，聚敛钱财。汉定徐州之后，亦考虑及此，为稳固人心，仍用伍文忠之长孙伍玄为徐州牧。
伍玄能领徐州，自知其借助其祖上伍文忠之遗力也，所以小心谨慎，事事尊奉朝廷，不敢有丝毫怠慢，凡是朝廷之令，伍玄一概遵令施行。徐州豪强实力虽然追思敬服伍文忠，仍奉伍玄为徐州之长，然见其不能主事，对汉朝极为恭顺，且不管何等政令，不问可行否，一概遵命施行。寻思伍文忠之时，徐州之政，皆由徐州做主，朝廷岂能干涉？而今日归汉之后，赋税徭役，皆由朝廷调度，朝廷又遣御史前来巡查徐州，禁止以前不法之事，如此一来，徐州豪强等巧取豪夺、横行称霸一方之事便不能行，于是多心怀不满，对伍玄大失所望，便渐渐不遵其号令。彭城、东海等地豪强大户，每户皆养有家兵数百，伍玄虽然禁止，然其等阳奉阴违，并不遵命。又与驻守徐州伪燕降将关阳、洪镇等结纳，以财宝贿赂之，关阳拒之，洪镇受其贿赂，则暗中庇护。徐州豪强私养兵丁、贩运私盐等不法之事，仍明目张胆。长史虞良亦虑及豪强势力庞大，劝伍玄勿要得罪，不然徐州牧将不保。
将军云迎，虽领军队，然其麾下部将皆出自徐州豪强势力，其被架空，难以行事。彭城豪强彭氏宗族彭遵、彭充等人，家资亿万，童仆数百，各自豢养家丁五六百人，买通彭城太守，专行欺瞒朝廷、巧取豪夺之事。朝廷征收赋税，其等弄虚作假，抗命拒缴，违反朝廷政令之处甚多。彭鹜亦彭氏宗族，背叛投敌，后死于夷州，彭氏家族遂被汉朝除去官职爵位，彭遵等深以为恨，仇视朝廷。汉朝因为辽东未定，尚无暇顾及，伍玄亦不能弹压，彭遵、彭充等便在彭城不遵法令，称霸一方，广结势力，与东海、东莞、琅琊等郡豪强皆暗中联络，沆瀣一气，对抗朝廷。
前番领英巡视徐州之时，已经发现此种端倪，遂密令武兼文，如有变，可采取非常手段震慑之。章武三年春，汉军征伐辽东，征调徐州赋税，徐州豪强不满，拒缴纳之，伍玄差云迎领军前往强行征缴，云迎至，东海、彭城二郡太守皆为豪强所操纵，不奉命，云迎手下军士亦不听命令。云迎不得已返回下邳，回报伍玄，伍玄恐违背朝廷命令，急忙请卫将军武兼文相助。武兼
…。。