一天一夜，尉迟恭率领士兵不眠不休，一路攻城拔寨，由于汉军人少，加之燕山内部道路崎岖难行，无法聚拢士兵支援。故而汉军守军也是连战连败，一连被尉迟恭夺取了十数道关卡。
不过好在汉军凭借着燕山最后一道屏障拦住了尉迟恭的去路。
白檀位于渔阳边境北部，燕山外围，但此地地形陡峭，白檀关建立的也相当坚固。乃是渔阳北边的军事重镇，而这里有守军五百，加上从内部不断败退进入白檀的士兵，总共有一千五百余人。
白檀关横立于白檀山山，卡在两山之间，关墙长约数百米，高两丈许，算得上是易守难攻。
尉迟恭手下兵马大多是骑兵，擅长骑射，冲锋，追击战斗。原先能一路高歌猛进，是因为关卡人数太少，无法驻守，但白檀关士兵却又一千多人。尉迟恭手下骑兵不擅长攻坚战，几番冲锋下来，死伤百余人马，尉迟恭也心疼了，却终于是停止了进攻，让汉军松了口气。