СИСТЕМА ОПРЕДЕЛЕНИЯ ИМЕНОВАННЫХ СУЩНОСТЕЙ С ДИНАМИЧЕСКИМИ ПАРАМЕТРАМИ

1. Система определения именованных сущностей с динамическими параметрами, содержащая: модуль процессинга исходных текстов на естественном языке, модуль определения тематик именованных сущностей, модуль решающей модели и модуль набора моделей извлечения именованных сущностей из текста, при этом
модуль процессинга исходных текстов на естественном языке, выполнен с возможностью:
- приема текста на естественном языке, содержащего неразмеченные наборы предложений или размеченные наборы предложений, содержащие сущности определенного типа;
- анализа полученного текста, для нахождения участков текста, содержащих именованные сущности, а именно: разбивают полученный текст на предложения, осуществляют семантический анализ предложений, после чего выполняют лемматизацию и стемминг слов, при этом образуя массив слов из которого удаляются стоп-слова и пунктуации, группируют слова со схожим смысловым значением, присваивают вес каждому слову в зависимости от частоты встречаемости его в тексте и определяют именованные сущности из сгруппированных слов;
модуль определения тематик именованных сущностей, выполнен с возможностью: классифицировать именованные сущности, которые были определены в тексте на разные классы тематик, обнаруживать и классифицировать предопределённых связи между сущностями, которые распознаны в тексте и с помощью онтологического графа связывают классифицированные именованные сущности с соответствующими сущностями из открытой базы знаний;
модуль решающей модели, выполнен с возможностью принимать на вход классифицированные тематики именованных сущностей, слабосвязанные тематики и слова с наибольшим весом и с помощью, обученной нейросетевой модели определять какая именно модель извлечения именованных сущностей из набора моделей будет определять из текста именованные сущности;
и модуль набора моделей извлечения именованных сущностей из текста запускает выбранную из набора модель, которая определяет именованные сущности, которые описывают определенные объекты.
2. Система по п.1, характеризующаяся тем, что семантическая структура из множества семантических структур представлена графом, включающим множество узлов,
соответствующих множеству семантических классов, и множество дуг, соответствующих множеству семантических отношений.
3. Система по п.1, характеризующаяся тем, что стоп-слова выполнены в виде предлогов и вспомогательных частей речи, а также с использованием базы стоп-слов.
4. Система по п.1, характеризующаяся тем, что для присвоения веса каждому слову используется функция tf-idf или ВМ25.
5. Система по п.1, характеризующаяся тем, что отношения между предложениями могут быть сильно связанные, это если тематики могут пересекаться и слабо связанные.
6. Система по п.1, характеризующаяся тем, что для классификации тематик используется библиотека с открытым кодом для тематического моделирования больших коллекций текстовых документов (BigARTM).
7. Система по п.1, характеризующаяся тем, что открытой базой знаний может быть: DBpedia, Freebase, OpenCyc, Wikidata, YAGO, Wordnet.