本部堂德薄能鲜，独仗忠信二字为行军之本，上有日月，下有鬼神，明有浩浩长江之水，幽有前次殉难各忠臣烈士之魂，实鉴吾心，咸听吾言。檄到如律令，无忽！

1854年2月25日，曾国藩衡州誓师，命褚汝航为水军统领，塔齐布为陆军先锋，乘战船240艘、渔舟120艘，率军17000，顺江东下。

曾国藩舟行湘江，莅临长沙，咨告湖南巡抚骆秉章东征事宜毕，复奏：贵州黎平府升用道胡林翼，前经督臣吴文镕奏调湖北差遣。该员自带黔勇六百名，由黔赴鄂，于正月下旬驰抵金口，适值黄州师溃，贼踪上窜，该员所募黔勇系山民，不习水战，又兼无饷、无夫、无货药锅帐，不能前进。迭据该员具禀南抚臣及臣行营，请支给口粮军械在案。臣与抚臣函商，派员解送货药帐棚，拨银二千两往资接济。臣拟先遣陆勇与该员会合援鄂，又值贼匪窜扰岳州、湘阴、道路阻隔，委员仍行折回。臣思岳州一带既被贼扰，自当先攻克岳州，不使南北梗塞，方能全师东下。现拟札饬该员暂驻岳州附近地方，臣迅即东下，与该员督勇先行会剿。

幕僚陈士杰曰：“涤帅统领万兵，空前绝后，不入长沙暂歇乎？”

曾国藩呷茶四顾，怆然道：“长沙吾城，近在咫尺，只可惜，抚疑督谤，近不的分毫；王鑫小子，返璞山人，拗口小名，叹只叹，崎岖古怪，悟不透人意。此子，只三千湘勇，鏖战靖港三日，终挫贼军攻势，真虎将也。吾令：副将塔齐布、监生邹寿璋带陆勇二千，千总杨载福、生员彭玉麟率水师二营，北进岳州，逐贼出湘；贵东道胡林翼、前平江知县林源恩，合力剿除平江地方贼匪。”

王鑫、胡林翼、塔齐布合力进击。石祥祯渐不能支，不得不让出宁乡、靖港、岳州，退守鄂域。

杨秀清闻，敕令春官右副丞相林绍障率兵三万，驰援石祥祯。

左宗棠自鄂返湘，退隐湘阴，偶逢散兵游匪，宗棠惊诧，谓左宗植道：“听闻贼将入梓木洞得吾而心甘焉。”

左宗植道：“贼若得尔，大卸八块！曾国藩、骆秉章三番五邀，曾国藩、郭嵩焘白手起家，暂可罔顾；骆秉章推诚相与，楚湘一切，全皆托付！尔充耳不闻，尔想署抚乎？”

左宗棠道：“署抚小焉？吾今亮也！如此这般，身已不由己，勉为一行乎？”

左宗棠跻身长沙，骆秉章喜泣，即将军政一切，专以相付。

1854年3月30日，塔齐布、邹寿璋率湘勇开进岳州城，曾国藩亦随水师进驻岳州南津港。

陈士杰道：“贵东道胡林翼、前平江知县林源恩，于平江地方与贼接战，迭获胜仗。”

曾国藩道：“胡润芝之才，胜吾十倍，此君早至一载，事不至此。吾令：水师西向搜查湖汊；塔齐布督率陆师，东驱剿办崇、通，肃清残敌。”