、长广王高湛的身边，于是两位叔王势力骤增对少主高殷的威胁越来越大。
为了不负文宣托孤之恩，杨愔开始谋划消减二王的势力，这时由于北齐遭到四面的围攻，杨愔企图通过抵御各国的进攻来掌握一部分军队，可是因为领军鲜卑将领的不配合，加上杨愔本身也不通军事导致北齐在战场上连连失败。
依附于高演高湛的大臣和勋贵纷纷上书，要求由常山王高演主持北齐的外兵省和骑兵省，只有这样才能击退各国的围攻。
无奈之下杨愔建议将二王出为刺史，远离中央权力中枢，这件事得到了皇太后李氏的支持。
然而皇太后李氏是汉人，鲜卑人出身的太皇太后娄昭君一直对她很不满，在高殷即位后更是曾经说‘岂使汉‘女’据于老‘妇’之上耶？’
在娄昭君的表态下，经过朝中一番斗争，加上北周和突厥进攻的厉害，于是高演被任命为都督太行山以西、河东诸军事的大都督，主要负责主持对突厥大军和北周达奚成兴大军的作战。
当时杨愔以为高演本身和自己一样也并不通军事，而且突厥、北周大军则是实力雄厚，此番担当重任的高演必然不能取胜，到时候高演一旦失利那么杨愔就有足够的理由去剥夺高演的军政大权。
可是杨愔万万没有料到鲜卑贵族们纷纷听从高演的调遣，加上新崛起的名将朔州都督斛律协一力挡住了突厥大军，使其无功而反，坐镇平阳的老将高岳又挡住了达奚成兴的进攻，竟然先后击退了突厥和北周大军。
于是高演声势日盛，在朝内外的压力下高演又恢复了大司马一职，事实上执掌着北齐北线、西线几乎全部的军队。
在这种情况下，杨愔又因为‘私’怨将朝中老臣崔暹、崔季舒解职罢黜，使得朝中一批‘交’好二崔的汉族官员和他离心，杨愔的势力更加虚弱了。
面对着这样危险的局面，杨愔当然不会看不清，他一面拉拢南面淮泗战场的北齐军队，一面加强依附自己的领军将军尔朱浑天和的军队实力。
这次斛律协奉高演的命令南下支援淮泗战场，让杨愔万分不安，因为斛律协是出身于鲜卑勋贵家族，又是高演的麾下将领。而斛律协南下需要经过邺城附近，万一情况有变会对邺城造成极大的威胁。
为了试探斛律协，加上南线陈霸先染病陈军进攻不再得力，继续北伐的侯安都和程灵洗被慕容俨挡在了下邳郡城外，对援兵的需要不再迫切，杨愔以皇帝高殷的名义命令斛律协不再南下，而是改向东进攻在王勇占领
…。。