=== Tokenization ===Unlike literate humans, computers do not understand the structure of a natural language document and cannot automatically recognize words and sentences.
В отличие от большинства людей, компьютеры не понимают структуру документа естественного языка и не могут автоматически распознавать слова и предложения.