Сенат утвердил присвоение ему Линкольном звания генерал-майора. Но Стентон, полный подозрений и ненависти к роду Блэйров, приказал отстранить генерала Блэйра от должности. Шерман настаивал на том, чтобы Блэйра назначили командиром 15-го корпуса. Этого же добивался и Грант. Линкольн навестил Стентона и попросил его отменить свой приказ.

Тогда же Блэйр написал своему брату Монтгомери, чтобы он узнал намерения президента. Линкольн ответил Монтгомери: «…Я прошу его приехать сюда, занять свое место в конгрессе, провести секретное совещание с нашими друзьями, поддержать необходимые назначения, помочь в выборах кандидатов на должности и таким образом участвовать в работе законодательного собрания и реально поддержать правительство в ведении войны. Если в результате всего этого Блэйра выберут спикером, пусть он займет этот пост; если нет, мы его вернем в армию. На Этом поприще он может послужить стране и личным своим интересам с большей пользой, чем в качестве рядового члена конгресса».

12 января 1864 года Блэйр занял свое место в конгрессе и защищал предложенную Линкольном декларацию об амнистии. Он выступил против предложения о реквизиции земель, имущества, имений южан и раздела этой собственности между освобожденными неграми и солдатами союзной армии. Хваля действия и решения президента, Блэйр одновременно предложил уплатить рабовладельцам, лояльным Союзу, стоимость освобожденных рабов. Те, кто слушал его или читал его речи, могли прийти к выводу, что он выступает от имени президента, и поверить тому, что семья Блэйров и президент работали в полном согласии. Линкольн вовремя увидел, что Блэйр увеличивает пропасть между радикалами и умеренными в конгрессе, и договорился с Шерманом и Грантом об отзыве Блэйра в армию.

Блэйр нанес удар Чэйзу тем, что предложил резолюцию, в которой выдвигалось требование о назначении комиссии из пяти членов конгресса для обследования работы министерства финансов и составления «доклада о возможных мошеннических обманах правительства» кем-либо. Сторонники Чэйза ответили ударом на удар.

Они обвинили Блэйра в том, что, еще будучи в армии, он закупил 225 галлонов (примерно 845 литров) бренди, неимоверное количество виски, кларета и другого вина, а также 25 полубочек эля и 225 ящиков консервированных фруктов. Эта сделка согласно сфотографированным копиям с приказа была совершена в Виксберге в июне 1863 года и заверена подписями генерал-майора Блэйра и 8 штабных офицеров. Этот приказ опубликовали в печати, а фотокопии его был» розданы членам конгресса. Обвинения чэйзовцев и миссурийских радикалов, жаждавших снять «скальп» Блэйра, заключались в том, что Блэйр и его штабные офицеры никоим образом не могли столько выпить и съесть в Виксберге и что все это сделано было в целях спекуляции и наживы. Блэйр заявил в палате, что этот приказ подложный.

Назначили комиссию, и через месяц она доложила, что «некто Майкл Пауэрс, представившийся агентом министерства финансов… предложил свои услуги» для закупки умеренного количества напитков, табака и сигар для генерала Блэйра и его штаба на сумму не более 175 долларов. После подписания заказ был кем-то изменен параграф за параграфом и доведен до суммы в 8 651 доллар.

Когда ужасная клевета на Блэйра была впервые опубликована, он командовал 15-м корпусом, совершавшим переход из Мемфиса в Чатанугу, с задачей согнать Брагга с горы Лукаут и с хребта Мишэнэри. Блэйра немедленно сместили. Он вернулся в сенат и там снова услышал обвинения своих противников. Он не хотел глубоко вдаваться в «фальсификацию, совершенную личностью, состоящею на службе в казначействе, и разбираться в клевете, распространявшейся специальным агентом казначейства и напечатанной в газете, финансируемой министром». Он не намерен останавливаться долее на виновниках, непосредственно совершивших и опубликовавших подлог. «Этих псов натравил на меня их хозяин, и поскольку я их загнал обратно в конуру, я считаю виновным в этом оскорблении хозяина, а не его собак».

Блэйр забросал Чэйза обвинениями, правдивыми и ложными; он использовал все, что могло очернить министра. Конгрессмены и журналисты на галерее были ошеломлены услышанным. Чэйз, возражавший против посылки президентом подкреплений в форт Самтер, Чэйз, который хотел прекратить войну в самом начале, теперь готов начать войну на истребление против правительств лояльных южных штатов. Министр финансов выдал своему зятю губернатору Спрэйгу разрешение на закупку хлопка на Юге, и это, вероятно, даст ему 2 миллиона прибыли. Блэйр требовал создания комиссии для обследования — она найдет достаточно материала. «Мистер Чэйз не сможет избегнуть ответственности… Он продолжает подпольно руководить избирательным аппаратом Помироя и не стесняется расходовать для этого народные деньги».

Итак, лидер одной фракции республиканцев нанес политический удар ниже пояса другому республиканцу и получил в ответ такой же удар. Это была нечестная игра с обеих сторон, и Линкольну нелегко было рассудить ее участников.

Ридл и еще один конгрессмен из Огайо посетили президента и сказали ему, что аболиционисты считают президента причастным к выступлению Блэйра. В течение получаса президент с документами в руках доказывал, что не имеет никакого отношения к нападкам Блэйра. Беседа продолжалась еще два часа; в результате Чэйз отказался от своего первоначального требования, чтобы президент публично дезавуировал Блэйра.

В апреле же 1864 года пришло сообщение об одном событии, центральной фигурой которого стал генерал-майор армии конфедератов Нэйтан Бедфорд Форесг. Никто из командиров Севера или Юга, вероятно, не ходил так часто в атаку и не зарубил столько противников, сколько Форест. Он не только не учился в военной академии, но даже не читал ни одной книги по военному делу. В Мемфисе он торговал земельными участками и рабами, добыл на этом огромное состояние, закупил хлопковые плантации, и к началу войны его доход составлял 30 тысяч долларов в год. Он сформировал несколько полков, некоторые из них снабдил конями, обмундированием и продовольствием, захватив для этого склады снабжения Союза. Однажды кто-то пытался доказать, что война ведется за независимость Юга, а не за рабовладельчество. Форест возразил: «Если мы не воюем за утверждение рабства, то я не знаю, за что мы воюем».

У форта Пилоу на реке Миссисипи, в 40 милях к северу от Мемфиса, Форест руководил наступлением 6-тысячного отряда против 600 защитников форта, выбил их из внешних укреплений и запер в крепости. Он поднял белый флаг для переговоров и предупредил, что пойдет на штурм форта. Командиры федерального отряда утверждали, что, используя перемирие, Форест продвинул свои войска на выгодные позиции и этим нарушит международные законы войны. Полки Фореста атаковали форт, взяли его и перебили больше половины гарнизона. Форест утверждал, что флаг Союза не был спущен в знак сдачи. Почти все 262 солдата-негра гарнизона были убиты, погребены заживо или ранены при попытке спастись бегством.