梁山义军招安后，双鞭呼延灼被派往山西大同任知府。大同离北方兴起的辽国较近，呼延灼到任后，经常组织百姓抗击辽国侵犯。有个古寺布奇兵的故事，鲜为人知。
话说宣和五年三月二十八日这天，辽军从北往南直逼大同城下。呼延灼气愤不过，提鞭率众迎敌。韩昌飞端坐马上，哈哈大笑：“呼延灼你认识本帅吗?”
呼延灼用鞭一指骂道：“辽国韩昌飞，多次犯我中原，何人不知、哪个不晓?侵我国土，杀我同胞。看鞭!”说后举鞭就打。
他们两个一来一往战了数十个回合，不分胜败。忽听韩昌飞哈哈大笑：“呼延灼，你中计了，看看大同城上飘着何国旗帜?”
呼延灼扭头一看，大吃一惊。"你城空虚，已被我骑兵从南门攻进了。"
呼延灼只得边战边退，节节往南退去，一直将要退到太原，身边只剩下二百余骑。刚想直奔太原，他忽然想起御旨：“你任大同知府，要与城市共存亡。”一咬牙：“大丈夫宁可战死，决不给后人留下骂名!”随即下令，往北杀去。将士们以一当十，又杀到大同西边。
呼延灼率领二百余骑，直奔困虎山。困虎山离大同一百五十余里，山上有座寺院，二百余骑住下有余，宋军当即在各山口设下关卡，在古寺内安营扎寨。
大同一带，数天来被辽军糟踏得好苦，辽军奸淫掳掠，无恶不作。老百姓听说呼延灼在困虎山古寺安营，组织民众抗辽，个个踊跃参军，有妻子送丈夫的，也有父母送儿子前往部队的，还有送米、送面、送粮草的，不到一个月，组织起五千余人的队伍。在古寺大殿上树起“抗辽义勇军”大旗。他们白天训练，晚上守山。
在困虎山下，有一赵家庄，这庄里有个恶霸，姓赵名得山。他有良田千顷，骡马成群。一日，赵得山赶大车进了大同城，天黑返回家，第二天带领家院，抬着猪肉，拉着面粉往困虎山古寺走去。
赵得山骑着高头大马，大张旗鼓向前走来，来到山口，被守山义军挡住。赵得山手一摆道：“你向古寺呼延灼知府禀报，就说赵家庄赵得山送米面慰劳义勇军，将军若不见，我们马上回去。”
那义军上下打量赵得山一伙，又往后望了望，没有异常，派一人上山禀报去了。不一会儿，山上传下命令：“请赵员外上山。”
呼延灼接到寺外。赵得山下马作揖道：“呼延将军抗辽，鄙人十分佩服，天下兴亡，匹夫有责嘛!”
呼延灼把赵得山迎人大殿。呼延灼示意一部将：“快快上茶。”
赵得山从一上山，两只贼眼上上下下，前前后后张望。呼延灼早已看在眼里，记在心上。赵得山抱拳问：“呼延知府有何困难，尽管吩咐，我一定尽力相帮。”
呼延灼叹口气道：“实在困难，粮草不足，战士又无战斗力，坚持哪天算哪天吧!”
赵得山一抱拳说：“我们告辞了!”呼延灼也不强留，把赵得山送出古寺。
呼延灼送走赵得山，在大殿内走来走去想着计谋，不一会儿，几位骑兵将领前来，他便将他的打算说出，对一骑兵将领张虎言道：“你到附近村庄找些灯笼，砍些树枝，要这么这么办......”张虎遵令而去。
呼延灼又命其他将领，在各要塞处设下弓箭手，要寸步不离守山;若有异常，放炮为号，切不可大意;辽将若偷袭山寨，自有办法对付。他详细安排了一遍。
第三天夜里，没有月亮星光，黑得伸手不见五指。天到半夜，忽然东山炮响，接着，喊声不断：“辽军偷袭山寨啦!”
呼延灼披挂上马，命令张虎按计而行。呼延灼拍马带领数将下山，同辽军元帅韩昌飞大战起来。韩昌飞高喊：“败军之将，还不下马受降!”
呼延灼怒道：“韩昌飞贼子，犯我中原，占我国土，掳我民众，还不快快滚回辽国!如若不然，要尔等性命!”
话到鞭出，打了起来。将士们路熟，越战越勇。正在此时，忽见古寺前后尘土飞扬，灯光闪闪，无数匹战马接连下山。人声呐喊，战马嘶鸣，在山谷回荡不停。
韩昌飞心里一惊，急勒战马，就在这一刹那间，被呼延灼一鞭打中左臂。韩昌飞战马打了个立战，韩昌飞几乎滚落马下，伏鞍而逃。古寺上的军马远远向山下奔来，义军箭如飞蝗，射伤辽国无数军马。韩昌飞高喊：“快快撤!”败兵如山倒，辽军丢盔弃甲。
呼延灼率将士猛追，一下追出三十余里，大胜而归。在返回途中，呼延灼见一将军骑马追赶一人，那人跑不多远，被那将军抓住，带到他的马前。
呼延灼仔细观察那人，不由怒上心头：“赵得山!辽军偷袭山寨，你在此何干?”
“我、我来山上报信。”那将士一指赵得山骂道：“是他指引辽军道路，辽军战败，他藏在山洞。我发现后，他骑马奔逃。”
“赵得山，你死到临头，还敢狡辩!你投降辽国，充当内奸，前天上山送粮，实为探道，被我识破，还有何话说?”呼延灼怒道。
赵得山趴下磕头，如鸡啄碎米般：“呼延知府饶命，我再也不敢了!”
“狗改不了吃屎，民族的败类，留他何用!”将士们怒吼道。呼延灼怒吼一声，一鞭打将下去，那赵得山顿时脑浆迸裂，一命归西。
山上骑兵还源源向山下飞奔，这是怎么回事?三天前呼延灼不是派张虎准备灯笼、树枝吗?用二十余骑兵马尾巴绑上树枝，战士手提马灯，从山上奔下，再绕后山奔上。就这二十余骑轮流奔跑，造成大队骑兵源源而来的假象。故此韩昌飞一时心虚，认为中计，差点被呼延灼打落马下，抗辽义勇军方获大胜。
对此，有民谣赞道：
辽国侵占在晋北.呼延初战吃大亏：为保疆土驻古寺。智除国奸震军威;打败辽将妙用计，惊枪之兔逃回国。
