СИСТЕМА И СПОСОБ АВТОМАТИЗИРОВАННОЙ ОБРАБОТКИ ЭЛЕКТРОННЫХ ПАКЕТОВ ДОКУМЕНТОВ С ДООБУЧЕНИЕМ

1. Способ обработки электронного пакета документов, выполняемый по меньшей мере одним вычислительным устройством, содержащий этапы, на которых:
а) получают тексты пакета документов, состоящего по меньшей мере из одного документа;
б) определяют на основе текстовой информации, полученной на предыдущем этапе, тип каждого документа пакета из списка возможных типов документов пакета;
в) извлекают из текстовой информации набор именованных сущностей с учетом типа документа;
г) получают обработанные пакеты документов;
д) отбирают текстовые документы для обучения моделей (далее - прецеденты);
е) обучают модели определения типа (далее - классификации) и извлечения именованных сущностей на основе прецедентов, отобранных на предыдущем этапе;
ж) рассчитывают метрики качества по заранее заданному набору метрик для обученных на предыдущем этапе моделей.
2. Способ по п. 1, отличающийся тем, что численное представление текстового документа определяется на базе семантики слов, содержащихся в тексте документа, взаимосвязей слов друг с другом, в том числе выявленных на больших корпусах текстов, а также численных значений важности слов и словосочетаний текстового документа.
3. Способ по п. 1, отличающийся тем, что определение типа документа из электронного пакета осуществляется на базе численного представления текстового документа путем классификации по принадлежности к определенным, заранее известным типам документов, причем математическая модель классификации может быть реализована посредством алгоритмов машинного обучения.
4. Способ по п. 1, отличающийся тем, что этап извлечения именованных сущностей осуществляется на базе численного представления текстового документа посредством алгоритмов извлечения именованных сущностей, причем для каждой именованной сущности алгоритм извлечения может быть свой и задан заранее.
5. Способ по п. 1, отличающийся тем, что обработанные пакеты документов могут поступать на вычислительное устройство, осуществляющее способ по п. 1, из внешних систем по заданному заранее интерфейсу прикладного программирования (API).
6. Способ по п. 1, отличающийся тем, что дообучение моделей классификации и извлечения именованных сущностей включает этапы, на которых
производят отбор документов для оптимального процесса обучения моделей классификации и извлечения именованных сущностей;
производят обучение моделей классификации и извлечения именованных сущностей по заданному набору алгоритмов;
оценивают метрики качества обученных моделей, выбирают оптимальные по заданным заранее метрикам модели, принимают решение о повторении итерации дообучения моделей классификации и извлечения именованных сущностей;
причем производится по меньшей мере одна итерация дообучения моделей классификации и извлечения именованных сущностей, оптимальность процесса дообучения полностью определяется метриками, рассчитываемыми на последнем из упомянутых этапов и являющимися конфигурируемыми параметрами.
7. Способ по п. 6, отличающийся тем, что алгоритм отбора документов для оптимального процесса дообучения моделей классификации и извлечения именованных сущностей, а также набор алгоритмов извлечения именованных сущностей и правило для принятия решения о повторении итерации дообучения являются конфигурируемыми параметрами.
8. Система для обработки электронного пакета документов, содержащая по меньшей мере одно вычислительное устройство, по меньшей мере одно хранилище данных и по меньшей мере одну память, содержащую машиночитаемые инструкции, которые при их исполнении по меньшей мере одним вычислительным устройством выполняют способ по каждому из пп. 1-7.