而监军王侁却建议：“领数万精兵而畏惧如此。我们就应当鼓噪而行，直趋北川！”王侁就是以前陷害田仁郎后升官的人，这个陷害人而升官的专业户，他一说话准没好事！
护军刘文裕也赞成王侁的主张。杨业觉得这样必败，王侁便挖苦道：“君侯素号‘无敌’，今见敌为何不知进退，你该不会有二心吧？”
杨业无奈，只好说道：“业非避死，盖时有未利，徒令杀伤士卒而功不立。今君责业以不死，当为诸公先！”将要进发之前，杨业哭着对潘美说：“杨此行必不利。业，太原一降将，按理说早就该死。皇上不杀我，委我从帅印，授之兵权。非我惧敌不击，实在是想建功立业以报皇上知遇之恩！今诸君责业以避敌，业当先死于敌。”又指陈家谷口说：“诸君于此埋伏强弓硬弩，为左右翼以援，待我把敌人引诱至此，你们夹击之，不然，我们一个人也活不了！”
潘美便与王侁等在际家谷口列阵。斜轸初闻杨业兵将至，命萧挞凛伏兵于路。这天早上，杨业兵果到，耶律斜轸佯装退去，杨业便领兵追击，萧挞凛等杨业钻进圈套后，伏兵尽出，杨业不敌，退至狼牙村！王侁等人从凌晨等到将近晌午时分，派人登台眺望，以为契丹军已经退去，怕杨业独占头功，遂领兵离开谷口前去攻击辽军，潘美不能制止，率军沿交河（今桑乾河上源）西南行进二十里，他得知杨业兵败，竟然不往救援，反而退去雁门关去了，这下可害死了杨业。而杨业自晌午力战到傍晚，且战且退，终于退到陈家谷口，却未见半个宋兵的影子，他乃顿足垂胸，抚胸大哭，他知此战决无还的道理，他已身受重伤十余处，手下的兵土也几乎全部战死，杨业和他的儿子杨延玉和部将王贵大喊－声，便向敌军阵中冲去，杨业虽身负重伤仍然砍杀敌军数百，杨延玉和王贵也不幸战死，杨业的战马也因重伤不能行走了，他只好藏匿于深林之中，杨业藏在林中却被敌将耶律奚底瞧见，耶律奚底塔亏射箭，一箭射中，杨业翻身落马，敌军一拥而上，把杨业生擒。杨业被擒后，绝食三日身亡而去！
七月下旬，宋军在山后全面溃败，各城守军皆弃城而走，斜轸遂收复山后，辽主酬其功，加封太子太保，又以蒲奴宁为山后五州都管。宋太宗闻杨业败死，追赠其为大同军节度使，封其子杨延昭为崇仪副使，并追赠杨延玉为崇仪使，杨延浦、杨延训为供奉官，杨延环、杨延贵、杨延彬为殿直。杨业总算没白死！潘美“降三官”，王侁、刘文裕除官配隶他州为役。