Сам Ростопчин приписывал эту ненависть исключительно тому, что москвичи сделали его козлом отпущения за понесенные ими материальные потери при пожаре Москвы. Несомненно, что этот мотив играл большую роль в возбуждении против Ростопчина. Но он не был единственным. Люди, совершенно не заинтересованные, не понесшие личных потерь и даже готовые отдавать справедливость Ростопчину там, где это было возможно, тем не менее отвернулись от него в это время с чувством нравственной брезгливости. Решающую роль сыграл в этом случае возмутительный поступок Ростопчина с несчастным Верещагиным. Это событие возбудило одинаково и негодование общества, и гнев государя. Среди различных условий, подготовивших опалу Ростопчина, казнь Верещагина занимала, по нашему мнению, главное место.
В момент занятия Москвы французами Ростопчин присоединился к армии Кутузова и состоял при ней во время знаменитого флангового движения с Рязанской дороги на Калужскую. Среди этого движения он сделал «эффектный жест», предав огню свою Вороновскую усадьбу, чтобы она не досталась врагам. Затем он принялся поносить Кутузова и в письмах к государю изображать в самых мрачных красках состояние армии. Он еще не подозревал, что вместо обвинения других в глазах императора ему пора было подумать о самооправдании. Через некоторое время он демонстративно оставил армию и поселился во Владимире, где собралось в то время большое общество московских беглецов. Здесь Ростопчина уже начали посещать заботы о собственном положении. Французы очистили Москву; Ростопчин в качестве московского главнокомандующего должен был вернуться в столицу.
Между строк этого письма Ростопчин не мог не прочесть предвозвещения конца своей служебной карьеры.
Но стоило ему переехать французскую границу, и сейчас же дало себя знать сердце истинного русского барина, как магнитная стрелка к северу, всегда и несмотря ни на что тяготеющее к Парижу. Первое его письмо из Парижа к жене так и дышит радостью школьника, вырвавшегося из карцера в рекреационную залу. «Я употребил 4 дня на переезд из Страсбурга в Париж… дороги превосходные, хотя и покрытые водой. Прекрасная почта! Распрягают и запрягают в десять минут без предварительного заказа лошадей… я от чистого сердца заключил мир с французами. У себя дома они совсем иные, нежели вне своей страны». Далее следуют восторги перед французской вежливостью.