В 1812 году из-за нашествия французов Поздееву пришлось переехать в имение Нелюбово. В переписке он укоряет русских военачальников за сдачу Смоленска и Москвы, опасается, что Наполеон освободит крестьян, вспоминает времена Пугачёвского восстания. После войны жалуется на убытки, понесённые от французских войск.