Наступила зима 1811 года. В очередной раз крестьяне, приносившие хлеб юродивому чудотворцу, напомнили ему о том, что тот одевается не по погоде, на что в ответ услышали: «Подождите год-годик, и жарко будет, и мёрзнуть станете». В войну 1812 года Смоленск оказался на оккупированной французской армией территории. Корейшу встречали бродившим по опустевшему городу, вымаливающим милостыню, которой он не забывал поделиться с такими же, как и он, обездоленными бродягами. Иван Яковлевич помогал разрозненным русским ополченцам, рассеянным по смоленским лесам, вселял уверенность в близость победы русской армии. Есть сведения, что точно также позднее юродивый оказывал христианское милосердие и отступавшим частям французов, поскольку его видели бредущим в арьергарде наполеоновской армии, от которой по другим источникам бедолаге приходилось выслушивать немало шуток в свой адрес. Казачьим разъездом он был задержан и доставлен в штаб для дознания в качестве вражеского лазутчика, но вскоре недоразумение выяснилось, и убогий заступник некогда непобедимой армии Наполеона благодаря ходатайству хорошо его знавших смолян был с Богом отпущен.