好在此時漢軍逐漸爬上城樓，東墻吸引了墻上胡人的大量兵力，黑山軍在南墻的阻力自然也削弱不少，張飛對黑山軍做了半日的動員：“我等皆為漢人，前漢破胡侯有言：一漢當五胡！大家雖出身貧苦，可豈能墮前人武名？殺進城中，晉陽財貨可盡分于諸位！”
黑山軍方才勉強振奮斗志，拉出萬人分為五部，于毒白繞率四部，交予張飛關羽一部，在南墻五處蟻附登城。
張飛頂著箭矢攀上城墻，胡卒舉刀便要斬去張飛的手指，只是張飛借著最后一攀的沖力，將阻攔的胡卒也沖撞在地，幾名胡卒緊跟著前來阻攔，但張飛一聲低喝，俯身一掃腿將胡卒打翻，順手從腰間拔出斫刀劈開一人的額頭，白花花的腦漿伴隨著血水擠出來，其余胡卒也隨之膽怯。
此時晉陽城防已經出現兩次缺口，雖然可以說仍有所僵持，但較昨日而言，毫無疑問是形勢一片大好，就在這胡卒氣沮的時刻，呼衍于勒都急中生智，對身后士卒呼喊說：“將薪柴扔過去！扔過去！”
說話間呂布忽而發現一力士扭身露出甲胄間的空隙，當即將斫刀沿著鐵片徑直插入進去，待他攪上一手再抽刀拔出，那力士咕嚕一聲，撲倒在地，傷口中隨著膏油鮮血又流出碎裂的腸子，眼看就是不活了。
正興奮間，于勒都將薪柴運到，幾名胡卒往呂布頭上齊齊一擲，撞在甲胄上，逼得呂布往后連退三步，他才發現是一根燃燒的梁柱。
城上的薪柴多時用梁柱門板所致，材質不僅牢固耐燒，而且尺寸龐大。吃了這一擊，只覺得甲胄發燙，猶豫間，胡卒將薪柴在他面前堆成一堵火墻，呂布本想乘機擴大戰果，但薪柴燃燒到處彌漫黃白色的灰煙，不止嗆人口鼻，還迷得漢軍將士流淚不止。別說前進半步，就連在原地駐守也難以進行。
張飛在南墻也僅能維持兩刻攻勢，黑山軍雖然勉力出兵，但除去少數將領外，大部分士卒連最劣質的狗皮甲也無，只能短褐粗衣，硬頂著箭雨作戰，能上城作戰者不過十之二三，傷亡巨大且后援難濟，即使南墻守軍并不多見，張飛也無能為力，無人跟上，他也只能原路后撤。
第二日攻勢又陷入了挫折，劉備下令鳴金收兵，但鼓聲仍然不停，他換了一批鼓手，對他們說道：“如今雖屢戰無功，可只要你等日夜擂鼓，待敵心神俱疲，便是我等克勝之時。”