Как NLP-технологии ABBYY научились мониторить новости и управлять рисками

В круг задач, которые можно решить с помощью технологий ABBYY, входит одна интересная возможность. Наш движок обучен работе банковского андеррайтера – человека, который из гигантского потока новостей вылавливает события о контрагентах и оценивает риски.

Сейчас такие системы на базе технологий ABBYY используют уже несколько крупных российских банков. Сегодня мы расскажем о нюансах внедрения этого решения – довольно нетривиальных и неожиданных вызовах, с которыми столкнулись наши онтоинженеры.

Как обуздать новостной поток

Банку для успешной работы необходимо точно знать, с кем он имеет дело, и оперативно реагировать на важные изменения в жизни контрагентов. Особенно когда это другие банки или крупные корпоративные клиенты – IT-компании, сельхозпредприятия и другие. Для этого в большинстве российских банков есть особые эксперты – андеррайтеры. Они анализируют информацию из различных источников, включая новостные сообщения, на предмет рисковых факторов для банка. Нужно не только прочесть новость, но и оценить то, как она повлияет на банк и его клиентов.

Факторы риска могут быть различными:

• банкротство,
• конфликт акционеров,
• изменения в структуре собственности или в составе руководства,
• факты мошенничества, угроза потери бизнеса клиентом,
• информация о наличии претензий и внеплановых проверках со стороны регулирующих ведомств,
• наличие исков,
• экономический кризис в стране, стихийные бедствия и другие обстоятельства непреодолимой силы
• и другие факторы риска.

Если андеррайтер выявляет рисковый фактор, то в перспективе сотрудничество с таким контрагентом может принести банку проблемы, вплоть до судебного разбирательства. И вероятность негативного исхода важно выяснить как можно быстрее. Почему это не так просто? В новостях важны не только упоминания контрагентов, но и контекст. Необходимо понять, какая связь у персоны или компании с факторами, которые банк относит к источникам риска.

Тем временем новостной поток, особенно если учитывать не только федеральные, но и региональные СМИ, огромен и продолжает расти. Одна только «Медиалогия», сервис мониторинга новостей, агрегирует контент из 52 тыс. источников. По данным Роскомнадзора, по состоянию на ноябрь 2020 в реестре российских СМИ было зарегистрировано более 148 тыс. действующих медиа. Человек физически не способен оперативно прочесть все новости, даже если речь идет только об интересующей его теме. Вот и приходится банкам либо постоянно пополнять штат андеррайтеров, либо искать альтернативное решение в области информационных технологий.

Как начинался проект

Итак, один из крупнейших российских банков решил определить, какая из двух технологий ABBYY лучше справится с задачей анализа рисков. Интеллектуальный классификатор документов определял риск-факторы на основе содержания новости. Решение на базе текстовой аналитики извлекало из новостей нужные данные. В итоге, как оказалось, лучший вариант – симбиоз двух решений: классификатор помогал сужать количество документов, которые поступают из ленты, и убирал совсем нерелевантную информацию, а дальше в работу включались технологии извлечения данных. 

Читайте продолжение поста на Хабре, чтобы узнать:  

• Как банк протестировал технологии ABBYY на примере одного рискового фактора – конфликтной ситуации?
• Какие результаты показал пилотный проект?
• С какими неожиданными трудностями мы столкнулись и как с ними справились?
• Как система поиска рисков работает с технической точки зрения?
• Как теперь устроены мониторинг новостей и управление рисками в банке?

Подобные технологии могут работать не только в банках, но и в любых компаниях, которые отслеживают большой поток сообщений о конкурентах, клиентах, партнерах и читают отзывы пользователей в соцсетях и блогах. Например, венчурные фонды с помощью NLP-технологий могут отслеживать информацию о перспективных стартапах с точки зрения потенциальных инвестиций, а государственные организации – ключевые новости о том, что происходит в конкретном регионе, какие есть проблемы, кто ответственный и т.п.

Проконсультироваться со специалистами ABBYY по применению технологии мониторинга информации можно уже сейчас.