清陕甘总督舒兴阿亲率六千兵勇赶来，命令总兵郝光甲、杨青鹤领三千人作先锋，前来增援水西门。胡以晃派兵设伏来一顿炮轰箭射，歼敌一半，迫使其退缩到一个名叫高桥的地方。

舒兴阿闻讯大惊不敢再往前行，自率三千人扎营于庐州西北三十里外之冈子集。堂堂陕甘总督被太平军神威吓破了胆。

江忠睿也生怕大哥有生命危险，急忙从江西带兵一千五百人赶到安徽增援，可是一接近庐州就遭到太平军狠狠打击。他只得扎营于城西五里墩待机行事。

新任江南提督和春也率一千多人来到庐州以东，但由于军纪涣散根本不能作战。清军各路人马聚集庐州城外围，兵勇已达一万数千名，可士气低落对太平军形成不了太大的威胁。

而太平军斗志旺盛，充满信心，丝毫没有放松对庐州城的攻打。胡以晃、曾天养部围庐州城达一月之久，城内清兵人心惶惶，很多兵勇都在为自己找一条活路。

北面拱辰门驻扎着庐州知府胡元炜招募来的一批淮勇，淮勇头目名叫徐怀义。这徐怀义对太平军怀有仁义。他生长在皖北一户农家里，上辈人常向他讲述大汉族主义思想，说少数满族却统治绝大多数汉族，于天理不公，这清王朝迟早是要灭亡的。

现在太平天国建都南京，横扫长江一带，北伐军直奔清廷老巢，咸丰帝宝座随时有可能被推翻，这不是已到了改朝换代的时候了吗？

徐怀义遂起反清之心，他借登墙守城之机向太平军阵地射去一箭，上绑书信一封，写道：“鄙人徐怀义系汉族人，一向不满朝廷，只为生计才当了清兵。由于有点文化得了个一官半职，现在带兵驻守拱辰门。弟兄们都是穷人不愿同贵军作战，只要贵军不杀我们，我们就放贵军入城。”

这封信一直转到了胡以晃手中，他看了之后又喜又悔道：“嗨！我这人有时喜欢蛮干，只知道猛攻猛打，怎么没有早想到攻心战呢？幸亏这徐怀义主动来投，真是天助我也！曾丞相，拱辰门正是你部围攻之地，想必你有攻城妙计了。”

曾天养捋捋胡须道：“如果徐怀义确实真心相投，那就容易攻下庐州。我军只需将兵力集中于拱辰门一带，待徐怀义打开城门，我们就迅速冲进去，消灭城内敢于顽抗之敌。”

胡以晃补充道：“为探明徐怀义虚实，我想先派人和他取得联系。”

指挥张遂谋化装成清兵混进城去，与徐怀义接上关系，约定水西门炮响，便打开城门迎接太平军入城，事成之后再行重赏。

一八五四年一月十四日深夜，雪花飘飘，寒气袭人。曾天养率一万多精兵，早已吃狗肉、喝烧酒暖和了身子，埋伏在拱辰门外等待出击。

另一路太平军已在水西门挖洞埋雷，胡以晃一声令下，“轰隆”一声巨响，城墙炸开数丈，太平军乘雪冲进水西门，杀向城内。

北面拱辰门守军在徐怀义策动下，已经叛变不仅没有去增援水西门，反而跑上去打开城门，迎接曾天养大军蜂拥而入。

水西门一声巨响，惊醒了正在熟睡的安徽布政使刘裕鉁。他急带副将松安、都司戴文澜带兵前去堵截太平军。胡以晃挥军一阵掩杀，将其官兵悉数全歼。