Автоматизированное извлечение полезной информаций из текста

Организация заказчика

ПрессИндекс

Контакты представителя заказчика

Михайлова Анастасия, +7 (343) 345-04-02 (доб. 173), +7(912) 240-89-29

Название

Автоматизированное извлечение полезной информаций из текста

Цель

Разработка системы, способной извлекать полезные факты из потока новостей

Описание проекта (Проблема)

Необходимо разработать систему для автоматического извлечения фактов о персонах и организациях из новостных статей.

Предлагается извлекать следующие факты:

1. Сопоставление персоны (ФИО) и должности;

2. Сопоставление организации и ее отрасли;

3. Сопоставление организации и персон, которые относятся к этой организации;

4. Сопоставление организации и ее географического расположения;

5. Сопоставление персоны и ее географического расположения.

Размер команды

3-6 человек

Роли и компетенции

1. Аналитик или менеджер продукта: способность организовать процессы разработки, умение презентовать продукт, умение писать документацию;

2. NLP-разработчик: умение анализировать тексты на русском языке, способность к формулированию правил для парсинга русского языка, базовые навыки программирования на python;

3. Веб-разработчик: навыки программирования на python, знание HTML/CSS

Результат /
Продукт

1. Демо-стенд (веб-сервис), который обладает следующими возможностями:

  a. Через веб-форму вводится текст, в ответ система визуализирует найденную информацию;

  б. Визуализация работы системы на выборке из 1000 предварительно загруженных статей из новостного источника.

2. Техническое описание продукта: принципиальная схема продукта, оценка производительности, оценка качества, оценка перспективы использования.

Предлагаемые подходы к решению проблемы

Есть несколько основных подходов и технологий для решения данной задачи:

1. Использование Tomita парсера/Парсер yargy(Natasha);

2. Построение зависимостей в тексте с помощью udpipe;

3. Использование нейронных сетей pos-tagging.

Допускается использование одного или сразу нескольких технологий.