李元度后来对人说：“我之所以不回祁门大营，是觉得对不起曾公，如果我是个不要脸的，早就回去了。”
这是典型的书生意气，他不知道自己现在已是湘军的一员，既然是军队，就该遵守纪律。他更不知道的是，曾国藩最重视纪律，无论是谁违反纪律，他绝不宽恕。
他决定要向中央政府弹劾李元度，所有他的幕僚都反对，反对最激烈的就是李鸿章。李鸿章对曾国藩说：“当初您创建湘军，李元度最先入您帐下，后来您出山挽狂澜，狂澜未挽，却连战连败，困苦艰难，中央政府不信任您，地方官阻碍您，在这种形势下，很多幕僚都离您而去，只有李元度一根筋地跟随您。您和李元度不是上下级关系，简直就是生死之交。军纪固然重要，但情谊更重要。”
曾国藩发表意见说：“湘军能有今天的成绩，全靠纪律。没有纪律的军队不先灭于敌手，必先毁于自己。”他举例说，“当年湘军初出茅庐时，他弟弟违反军纪都被遣散回家，因为不如此就不能保证军队的战斗力，”他又委婉地说，“现在弹劾李元度，不代表我以后不用他，这只是权宜之计。”
李鸿章相信曾国藩的话，但他有顾虑：一旦弹劾李元度，中央政府抽风将他处死，人都死了，还用个啥。所以他带领全体幕僚到曾国藩军帐中力争，不能弹劾李元度。
曾国藩是王八吃秤砣，铁了心要弹劾李元度，并让李鸿章草拟弹劾稿。李鸿章肝火大冒道：“这稿子，我写不了！”
曾国藩冷笑：“我自己来。”
李鸿章追击道：“那我只好告辞了。”
曾国藩气冲斗牛：“听君自便！”
李鸿章已骑虎难下，只能离开。他走后，曾国藩负气地对人说：“李鸿章这小子实在难与人共患难。”李鸿章也四处对人说，“曾国藩这老家伙太不近人情，冷血的腐儒。”
李元度也没想到曾国藩真对他下了手，很快，他接到中央政府的命令：革职拿问。他咒骂着抹掉额头的汗水，侥幸地说道：“幸好老子早有准备，不然真被曾公这厮给算计了。”