在湖北太浪费了。所以那怕是强势到敢把其他中堂大学士批注涂抹更改的肃顺，在帮助吴越保住湖北巡抚的位置时也感觉非常吃力，压力巨大。
还好，即便也非常倾向于把吴越调出湖北，咸丰大帝对于这件事还是十分的谨慎和小心，还很难得的没犯耳根软的老毛病，没有在军机六部的一片呼吁声中松过那怕一次嘴，也反复在心里盘算分析过把吴越调出湖北的优劣利弊。
在咸丰大帝看来，把吴越改放其他省份的最大好处，当然是可以利用吴越的能征善战平定叛乱，让吴越打更多的胜仗杀更多的长毛。弊端则是有些冒险，拿中原诸省中唯一比较安定的湖北冒险，给目前势头益盛的太平军再次大举入侵湖北的机会，此前太平军两次攻克湖北省城，已经给满清造成了巨大损失，这会在中原糜烂的情况下，再让太平军乘机杀进好不容易安定下来的湖北，咸丰大帝肯定是哭都哭不出来了。
吴越的兵权过重和能力过于出众也让咸丰大帝十分忌惮，此前坚决不肯给曾国藩地方实权，咸丰大帝就是怕曾国藩权力过大生出异心，吴越虽然不象曾国藩那么张扬，一出手就搞出只听命于曾国藩一人的上万湘军，却也在湖北零敲碎打的积攒出了一万抚标，还搞出了什么大冶铁厂和大冶枪炮局，