С течением времени в оппозиции к Барклаю оказались все противники отступления. В рядах ее оказались многие из тех, кто в прошлом относился к Михаилу Богдановичу с глубоким уважением, но «ропот сильный был слышен между офицерами и генералами оттого, что все они желали грудью встретиться с неприятелем». Вот лишь одно из изречений казачьего атамана Платова: «Боже милостивый, что с русскими армиями делается? Не побиты, а бежим!»
Даже начальник штаба 1-й армии Ермолов «был противного с главнокомандующим мнения на способы ведения военных действий, почитал его изменником или, по крайней мере, неспособным находиться в числе русского воинства».
Убеждения эти распространялись среди низших чинов, где солдаты главнокомандующего своего Барклая де Толли именовали не иначе как «Болтай-да-и-только».
Действительно, небольшие схватки с врагом показали, что французов можно бить. Поэтому беспрерывное отступление вызывало недоумение и противление этому большей части воинов. Им горько было оставлять на поругание и бесчестье русскую землю: стариков, матерей, детей, жен и невест. И вообще русский мужик не привык отступать, не подравшись как следует. Словом, ни дворянство, ни чернь Барклая не понимали. Справедливости ради надо сказать, что в создании столь неблагоприятной для себя обстановки немалая заслуга была и самого Михаила Богдановича. Вот как отзывались о нем современники: «Совершенная противоположность Суворову и Кутузову. Он был высокого роста, худощав, важен, молчалив, не владел даром слова, не обладал вполне русским языком. Внушая уважение к себе, он не успел внушить любви и доверенности к себе подчиненных».
Если добавить к сказанному не только постоянную сухость в общении и официальность тона, но и независимый, прямой характер, нежелание заискивать перед кем бы то ни было, пренебрежение к этикету высшего света, то станут понятны слова того же Ермолова: «Поистине драматическими оказываются судьбы тех, кто не заискивает перед представителями свиты императора, кто не умеет лукавить, заводить нужные связи и знакомства».
Для военного министра наступал кризис доверия! Понимая это, ради сохранения своего реноме Барклай предпринимает ответные шаги. Удаляет из армии многих развязных флигель-адъютантов, а затем и самого Беннигсена (но тот доехал только до Смоленска и здесь дождался отходившую армию), перевел главную квартиру и походную военную канцелярию императора в состав тяжелого обоза (то есть удалил источник интриг и сплетен по крайней мере на один суточный переход от своего штаба). Твердой рукой наводит дисциплину и порядок в отступающей армии. В приказе своем требует: «Расстреливать каждого, у кого в лагере найдутся незаконно присвоенные вещи». (Заметим, что в Оболони по приказу его были расстреляны перед строем войск 12 мародеров.)
В то же время, заботясь о солдате, уповая на старания генерал-интенданта армии Ф. Канкрина (позже министра финансов России), добивался улучшения питания армии, в нарушение артикулов (невзирая на возмущение брата царя Константина) предписывает «не блюсти форму одежды на походах». Одновременно обращается с воззванием к солдатам и офицерам, уверяя их в скором объединении армий и генеральном сражении. «Я с признательностью вижу единодушное желание ваше ударить на врага нашего. Под Витебском мы воспользовались уже случаем удовлетворить сему благородному желанию… Мы готовы были после того дать решительный бой, но хитрый враг наш, избегая оного и обвыкши нападать на части слабейшие, обратил главные силы к Смоленску, и нам надлежит встать на его защиту».