Під час Французько-російської війни 1812 року, на території Хорольського та Лубенського повітів були сформовані, як ополчення, козацькі полки. За розпорядженням генерал-губернатора Я. Лобанова-Ростовського на початку серпня сюди прибув учасник російсько-турецької війни 1806—1807 р.р. у чині штабс-капітана І. П. Котляревський. Тож незвичайна назва населених пунктів Козаче і Котляревське і пов'язана із цією подією.