西塞山控扼长江，号称吴头楚尾，故此战略位置极重，镇守西塞山的于永绶部也是胡茂祯起家的部队，战斗力较之普通营兵要强上许多，当年攻打福建的隆武朝廷，胡茂祯就是带着这三千兵，从仙霞关一路杀进了福州城，所以于永绶是信心满满。

形势的发展也和他料想的一样，李广恩所部兵临山下后，随即发动了对西塞山的攻势，他以李雄振统兵五千在西塞山南麓一带稍显平缓的山道上发起了攻击。

由于西塞山山势险峻，南麓坡道亦只能容纳数百人同时进攻，李雄振遂将士卒分为三队，以鸳鸯兵和白杆兵交替掩护后面的火铳手和弓箭手攻山。

攻守易势，李广恩也尝到了攻山的苦头，靖南军进攻之后，清军并不还击，待靖南军冲到壕沟前准备处理地上的尖桩时，清军的弓箭手和火铳兵便开始疯狂地射击起来，山头部署的虎蹲炮也拼命地射击着散子弹，大大小小的炮子如同雨点一般砸了过来，无数的箭矢亦如同飞蝗一般落到靖南军的队列中。

只一波攻击，前队的靖南军就倒下了近两百人，后队的靖南军则一个个缩首顿足，在山道上寻找掩体和环形工事内的清军对射起来。

靖南军攻击受挫，大大提升了于永绶麾下绿营兵的士气，又有不少的清军士卒疯狂地将手边的滚木擂石推出了环形工事。

李雄振大怒，前者唐王授封诸官，镇将大人不过授粉庆丰侯，而自己只不过是个玉林伯，那胡全才就靠通报了几次消息以及活捉了伪清简亲王济度，就能授封国公，所以李雄振和李广恩均是不服，这一次可是卯着劲要立下攻取安庆的首攻。

“杀！给老子杀！”

为了鼓舞士气，李雄振亲自挥刀冲阵，主将大人奋勇冲杀，官兵们哪里敢怠慢，亦是不要命地往山上爬去。

但是清军的防线，修的着实易守难攻，他们在山口挖了一条一人多深的壕沟，挖出的泥土堆在队列前面，成了一道可以遮挡的泥墙。一排又一排的火铳兵交换射击，最前边的火铳兵和弓箭手借着泥墙的掩护迅速放完手中火铳，和箭矢，急急退后装弹搭箭，第二排接着上前射击。紧张的战斗下，他们己经听不到军官们的呼喝，他们只知道将手中的火铳和弓箭打将下去。

清军阿不光居高临下，而且又有土墙保护，无险可依的靖南军只能被动挨打，纵是李雄振不断地鼓舞士气，但是在这种地利环境下，靖南军是根本攻不上去的。

中午时分，在留下了千余具靖南军尸体和数百个在山坡上闭目待死的伤兵后，李雄振只得下达了撤军的命令。

靖南军这一次攻山，山上的清军只折损了近两百人，于永绶派人下山点验战果时，发现阵亡的贼寇居然有一千三百余人，登时喜出望外，所以他一边派人向安庆报捷，并言之凿凿地向洪承畴和多尼保证，只要有他于永绶在，西塞山安全必然无虞。

李雄振退兵后即和李广恩商议，二人皆以为清军防守严密，从正面进攻损失太大，不如继续佯攻正面，再选取精锐士卒从侧翼的攀爬上去，若是袭取了对方的主峰炮台，那西塞山则可一鼓而下。

二人定计以后即选精练鸳鸯军阵的士卒两百人，让他们从两翼的山峰攀爬上去，自己则继续率领主力在清军阵地前虚张声势。