钟师道让军队休整两天后，命令折可求率领一万五千人马进攻银州，他本人率领一万五千人马加刘继迁三千人马攻取夏州。
两天后，到达夏州，钟师道便命令攻城，夏州城墙高坚固，夏军守卫严密，一天也未攻下，宋军伤亡不少。第二天上午，钟师道下令，今天必须攻下夏州城，凡是攻战不卖力气，无论军官和士兵立即处斩。
杨怀德看到很多宋军受伤被抬下来，心里着急，他仔细观察攻守双方的情况，有了主意。对杨怀兴和刘可世说道：“你们看，在城墙马面前方的位置夏军防守不严，一会儿你们俩架飞梯，我用最快速度爬上城头，夏军就防守不住了，关键是速度要快。”
杨怀兴和刘可世说道：“没问题。”
杨怀德又把想法讲给刘继迁，刘继迁说道：“我组织一次进攻掩护你攻城，如果不行，你们马上退回来。”
杨怀德脱掉铠甲轻装上阵，刘继迁将攻城士兵划成十个小分队，他一声令下，弓箭手向城头齐射，他亲自擂鼓，十个小分队一起冲到城下，架梯攻城。
杨怀兴和刘可世抗起飞梯迅速跑到马面墙下，将飞梯架到城头，杨怀德深吸一口气，脚下用力，像一支离弦的箭冲到飞梯下面，然后像一只敏捷的猴子窜到飞梯顶端，还没等守城的士兵反应，他腰部发力，左手撑住垛口，从那士兵头顶翻过，落到城头，反身一枪刺入那士兵后背，周围的夏军惊呆后纷纷后撤。
杨怀兴和刘可世紧跟着登上城头，三人奋力击退城上守军，城下宋军高喊着一拥而上，夏国士兵惊慌溃逃，就这样夏州城很快被攻克。
王渊见到杨怀德，说道：“怀德，你好快啊！我看你还在城下，一眨眼就到了城上，真是古有飞将军李广，今有飞将军杨怀德啊！”
杨怀德说道：“你过奖了，我哪敢和飞将军李广相比！”
夏银二州被攻下，大家沉浸在欢乐之中，五天过去了也没有作战计划。
这一天上午，王渊遇到杨怀德三人，说道：“你们三人生龙活虎，刚参军就屡力战功，前途不可限量。”
刘可世说道：“多亏你们几位前辈指点，我们才有机会立功。”
王渊说道：“刘将军有你们三位小将真是如虎添翼，过几天我请个假回家看望年迈的父母。”
这时，一名传令兵来报钟元帅召集所有将领开会，几人马上前往大帐。
钟师道表情凝重，看到大家都到了，说道：“大学士蔡攸和辽国晋王耶律隆运下午将来到这里，宣布朝廷的旨意，我先透漏一些消息给大家，朝廷命令各路人马全部撤回，所有攻占的城池都要归还给夏国。”
他刚说完，现场一下炸开了锅，大家议论纷纷，韩世忠叫道：“元帅，不能退啊，我们现在有背嵬军和神臂弓完全可以克制夏国骑兵，荡平夏国指日可待。”
刘继迁问道：“钟元帅，朝廷为何做此决策？”
钟师道说道：“据我所知，夏国多次向辽国求援，辽国向朝廷释压，指责我大宋出师无名，乱起事端，要求我们退兵还城，两国和解。而且北部边关奏报，辽国数万铁骑在我雁门关外耀武扬威。”
杨怀德说道：“钟元帅，难道我们怕契丹人不成，你带领我们把契丹胡虏赶出燕云十六州，收回我汉人疆土。”
杨怀德这一说，群情激昂，杨怀兴，刘可世，还有一些年轻将领也喊道：“杨怀德说得对，把契丹狗打回老家去！”
钟师道也难抑激动的心情，说道：“各位，老夫何尝不想这样，但是自从太宗以来，我大宋与辽国交战，几乎没有胜过，现在无人有把握打败辽国，老夫我也年近六十，有心无力，以后收复燕云十六州的大业就靠你们年轻人了！”说完，掩面离去。
刘可世气愤地问刘继迁：“爹，我们伤亡这么多兵将就白白把所有城寨归还给夏国吗？难道我们大宋就这么好欺负吗？”
刘继迁沉着脸，说道：“我们倒不怕夏军，但辽军兵强马壮，骁勇善战，我们确实不敌辽军。十多年前，我曾与辽国晋王耶律隆运交过手，十几个回合就被他打落马下。一旦辽国现在出兵攻我大宋，我们将两面受敌，后果不堪设想，朝廷做出这样的决定也是被逼无奈，哎，大家服从朝廷的旨意就是了。”众人不欢而散。
下午，大家又来到大帐，每个人都无精打采，大学士蔡攸和辽国晋王耶律隆运在钟师道陪同下端坐正中，那耶律隆运一身胡服，身材魁梧，一米八的个头，方脸络腮胡，气宇轩昂。
蔡攸说道：“各位将军，在辽国的调停下，朝廷已经和夏国和谈，决定两国停战，我军全部撤回，所有攻占的城池都要归还给夏国，夏国承诺不再侵扰我大宋边境。”
杨怀德心中一直憋着一口气，实在是忍不住了，走出来说道：“大人，在下杨怀德，我不同意停战，我们屡败夏军，应趁势灭掉夏国，天下一统！”
耶律隆运说道：“这位小将军，你把事情看简单了，你们眼前是打了几个胜仗，但是你们一旦进入夏国腹地，未必就能取胜，而且我大辽也不希望你们两国开战。”
杨怀德见耶律隆运插话，气愤道：“难道我大宋还怕你辽国不成，要打就打！”
蔡攸见杨怀德说话没有分寸，叫道：“大胆，杨怀德，不要在此胡言乱语，国家大事不是你来议论的，来人啊，把他拉出去！”
杨怀兴担心