До Наполеона эти сведения дошли 25 октября. Он понял, что в самой Франции «вера в прочность его власти поколебалась»125. 2 ноября Наполеон оставил Смоленск и повел поредевшие, не отдохнувшие, голодные и деморализованные колонны «Великой Армии» дальше на запад. В тот же день, 2 ноября, Кутузов привел свои силы к с. Юрову, юго-западнее Смоленска, и здесь дал им отдых до утра 4 ноября.

К вечеру 3 ноября Наполеон с корпусами Ж.-А. Жюно и Ю. Понятовского подошел к г. Красному. Он увидел, что город занят сильным отрядом русских, в то же время войска Милорадовича вышли к Старой Смоленской дороге у с. Мерлина, отрезая сразу три корпуса главных сил от Наполеона. Сзади преследовали казаки М. И. Платова. Кутузов 4 ноября перешел из Юрова в д. Шилово, не далее 5 км от Красного. Наполеон оказался в опасном положении. В ночь на 4 ноября стремительной атакой дивизии Молодой гвардии он выбил отряд русских из Красного и расчистил себе путь по Старой Смоленской дороге к с. Ляды. Отправив туда корпуса Жюно и Понятовского, он сам с гвардией остался в Красном, поджидая оставшиеся корпуса. За полночь пришел корпус Богарне, Наполеон и его отправил к Лядам. Выяснив, что русские не собираются вступать в генеральское сражение, он оставил в Красном маршала Э.-А. Мортье с Молодой гвардией дожидаться корпусы Даву и Нея, сам же вместе со старой гвардией и конницей Мюрата ушел в Ляды.

Командующие, Даву и Ней плохо взаимодействовали друг с другом. Даву 5 ноября, теряя обозы, пушки, отставшие части, с боем прорвался к Красному. Ней с корпусом отстал и был окружен русскими со всех сторон. Он имел по французским данным 6 тыс. бойцов пехоты и 6 орудий, из кавалерии взвод охраны. Ценою невероятных усилий и больших потерь Ней сумел вырваться из русского кольца, перешел в ночь с 6-го на 7-е ноября Днепр по тонкому льду у Сырокоренья и привел к Наполеону в Оршу 800—900 человек. За три дня боев под г. Красным с 4-го по 6-е ноября французы потеряли, по данным штаба Кутузова, 19,5 тыс. человек пленными, 209 орудий и 6 знамен. Д. П. Бутурлин называет цифры: 10 тыс. убитых и 26 тыс. пленных. М. И. Богданович – тоже 26 тыс. пленных, но 6 тыс. убитых. Русские потери составили 2 тыс. человек.

Кутузов представил царю бой с 4-го по 6 ноября, как генеральское сражение. За это упрекали командующего и Н. Н. Раевский, представленный к награде за отличие в боях 4—6 ноября, и А. П. Ермолов, утверждавший, что под Красным «сражения корпусов были отдельныя, не всеми их силами в совокупности, не в одно время, не по общему соображению»126. Еще строже высказался Денис Давыдов: «Сражение под Красным, носящее у некоторых военных писателей пышное наименование трехдневного боя, может быть по всей справедливости названо лишь трехдневным поиском на голодных, полунагих французов; подобными трофеями могли гордиться ничтожные отряды, вроде моего, но не главная армия»127.

После Красного у Наполеона оставалось 35 тыс. боеспособных солдат, за которыми тащились оставшиеся несчитанными десятки тысяч безоружных и больных. Вся эта масса людей растянулась на полтора суточных перехода. Свернуть со Старой Смоленской дороги им было некуда – всюду их ждала смерть от казаков, партизан, крестьян. Вице-король Италии Богарне писал 8 ноября начальнику Главного штаба Л. А. Бертье о войсках своего 4-го корпуса: «Дух в солдатах от сильного изнеможения так упал, что я считаю их теперь весьма мало способными к понесению каких-либо трудов»128. Боевой дух после Смоленска сохранила только гвардия Наполеона, т.к. и в самое трудное время, за счет других войск, она обеспечивалась всем необходимым. Из воспоминания Дениса Давыдова в боях под Красным: «Неприятель, увидя шумные толпы наши, взял ружье под курок и гордо продолжал путь, не прибавляя шагу… Полковники, офицеры, урядники, многие простые казаки бросались к самому фронту, – но все было тщетно! Колонны валили одна за другою, отгоняя нас ружейными выстрелами, и смеялись над нашим вокруг них безуспешным рыцарством… Гвардия с Наполеоном прошла посреди толпы казаков наших, как стопушечный корабль между рыбачьими лодками»