Новости города БезФормата.Ru
Владикавказ
Главные новости
 
Задать вопрос?

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов, разработанный специалистами АО «Айкумен ИБС»,показал наилучшие характеристики в конкурсной части состоявшейся в Москве XXIII Международной конференции «Диалог 2017», посвященной актуальной оценке уровня развития российских машинно-лингвистических технологий. При подготовке к конкурсу «умный» классификатор набрал обучающую статистику признаков из текстового корпуса объемом более миллиона слов, а для оценки точности ему было предложен массив документов из 15000 слов. В результате сравнительного тестирования на закрытой дорожке MorphoRuEval метод «Айкумен ИБС» признан победителем по точности нормализации русских слов, достигающей 92,22%. Кроме того, он занял второе место по восстановлению морфологических признаков с достоверностью свыше 93%. По мнению директора Департамента разработки АО «Айкумен ИБС» Андрея Ярового, «независимая экспертиза «DialogueEvaluation» подтвердила отличное качество морфологического анализа текстов, используемого в компании. Данный анализ является фундаментом всей текстовой аналитики, что позволяет нам с беспрецедентной точностью извлекать смысл из документов на русском языке». «Мы продолжаем двигаться вперед, постоянно совершенствуем алгоритмы и разрабатываем инновационные методы в своей работе, предоставляя возможность нашим заказчикам максимально использовать преимущества IQPLATFORM® - современного отечественного продукта в области BigData, по ряду функционала не имеющего аналогов на российском и мировом рынках» - подводит итог участия в мероприятии генеральный директор АО «Айкумен ИБС» Ирина Касаткина. Морфологический анализ выполняется на начальных этапах автоматической обработки текста и является одной из наиболее важных операций, влияющих на финальное качество анализа документов. К его задачам относится определение части речи и морфологических признаков (падеж, род, число, время, лицо и пр.) каждого слова предложения, а также нормализация - корректное восстановление начальной формы этих слов. Представленная технология лингвистической обработки позволяет более качественно и с минимальным участием человека анализировать большие объемы текстовой информации на естественных языках. Существующие методологии в этой области сконцентрированы на английском языке. Но они абсолютно несовместимы с русской языковой моделью по причине ее морфологической обогащенности более чем 300 различными комбинациями признаков. Исходя из этих особенностей, лингвистическая группа компании «Айкумен ИБС» разработала свой алгоритм, объединяющий достоинства классических способов с методами машинного обучения в виде двухступенчатой фильтрации словарного разбора: • Формирование предположений о возможных разборах слова с применением грамматического словаря. При отсутствии в библиотеке необходимого термина производится поиск наиболее похожего слова для разбора по аналогии; • Выбор оптимального варианта признака из контекста предложения с помощью самообучаемого классификатора на основе линейной машины опорных векторов SVM (SupportVectorMachine). Для дополнительной проверки каждого разбора применяется общая оценка из суммы оценок входящих в него признаков, а в качестве оптимального выбирается разбор с максимальной оценкой. Роль указанных признаков играют различные комбинации префиксов, суффиксов и отдельных морфологических характеристик слов в пределах контекстного окна размером ±3 слова от анализируемого. Научно-практический форум «Диалог» ежегодно собирает ведущих ученых, мировых экспертов и отраслевых вендоров для обсуждения передовых методов компьютерной лингвистики и обмена опытом создания прикладных решений по интеллектуальному анализу текстов на естественных языках. Наибольшим интересом в программе конференции-2017 пользовался конкурс MorphoRuEval, организованный лабораторией «DialogueEvaluation» для тестирования инструментов морфологического анализа русскоязычных текстов из сети Интернет. В этом году в нем приняли участие 15 команд, представляющих компании ABBYY, OnPositive, Pullenti, Samsung R&D и «Айкумен ИБС», а также университеты МФТИ, НИУ ВШЭ, ИСП РАН, МГУ, МИЭМ и НГУ. Пресс-служба Ростелекома

 

Последние новости Северной Осетии-Алании по теме:
Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
19:02 20.06.2017 Vestiyuga.Ru
Технологии машинного обучения группы компаний «Ростелеком» признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
17:22 20.06.2017 Осетинское радио
JPG Файл - МВД Республики Северная Осетия – АланияСегодня в Москве Министр внутренних дел Российской Федерации генерал полиции Российской Федерации Владимир Колокольцев провел в режиме видеоконференцсвязи с территориальными органами внутренних дел заседание Правительств
26.06.2017 МВД Республики Северная Осетия – Алания
Роскомнадзор пока ждет ответа от владельца мессенджер Telegram Павла Дурова и пока не блокирует сервис, но времени для урегулирования конфликта остается немного,
26.06.2017 Vestiyuga.Ru
Telegram могут заблокировать - Газета СловоРоскомнадзор пока ждет ответа от владельца мессенджер Telegram Павла Дурова и пока не блокирует сервис, но времени для урегулирования конфликта остается немного,
26.06.2017 Газета Слово
Более пятидесяти альпинистов из разных стран прибыли в республику для участия в массовом восхождении на Эльбрус.
26.06.2017 Кавказский Узел
США: Россия десятилетиями пытается подорвать американскую демократию - Осетинское радиоРоссия десятилетиями пытается подорвать демократию в США. Такое заявление сделал директор ЦРУ Майк Помпео в интервью, которое публикует NBC News.
25.06.2017 Осетинское радио
  Главе республика эта идея понравилась и он попросил подключиться к реализации проекта главу АМС Владикавказа Бориса Албегова.
25.06.2017 Vestiyuga.Ru
Сбежавшего на берегу Каспийского моря леопарда удалось поймать в Дагестане после того, как его хозяин объявил вознаграждение и призвал не приближаться к хищнику.
25.06.2017 Кавказский Узел
В ходе вооруженного конфликта на Северном Кавказе за неделю с 19 по 25 июня 2017 года погибли два человека, информации о раненых не поступало.
26.06.2017 Кавказский Узел
В результате столкновения "Газели" и легкового автомобиля на трассе "Сызрань – Саратов – Волгоград" один человек погиб, один госпитализирован.
26.06.2017 Кавказский Узел
При лобовом столкновении двух машин на трассе в Павловском районе скончались оба водителя и два пассажира, еще два человека доставлены в реанимацию, сообщило МВД.
26.06.2017 Кавказский Узел
Битаров поручил МВД разобраться с нападением на журналиста - Газета Слово
Битаров поручил МВД разобраться с нападением на журналиста
  МВД Северной Осетии начало разбирательство по поручению главы республики Вячеслава Битарова по факту нападения на журналиста "Российской газеты" Петра Плиева, которого неизвестный дважды  ударил по голове,
Газета Слово
Три человека, в том числе ребенок, погибли в ДТП в Кировском районе - Газета Слово
Три человека, в том числе ребенок, погибли в ДТП в Кировском районе
На федеральной трассе "Кавказ" в Кировском районе произошло ДТП с участием четырех автомобилей, есть жертвы и пострадавшие, сообщили в четверг агентству "Интерфакс-Юг" в УГИБДД МВД по республике.
Газета Слово
Газовики не подтверждают утечку газа как причину взрыва в котельной - Газета Слово
Газовики не подтверждают утечку газа как причину взрыва в котельной
Газовики обратились с просьбой не делать преждевременных выводов о причинах взрыва,  который во вторник утром произошел  в котельной по улице Кырджалийская во Владикавказе.
Газета Слово
Сегодня ночью скончался человек-эпоха, Нафи Джуссойты! - Osinform.RuСегодня ночью скончался человек-эпоха! Очень жаль когда уходят великие люди!
26.06.2017 Osinform.Ru
388995fb4874c08f22aecbad8230e664 - Министерство культуры26 июня 2017 года в Совете Федерации Федерального Собрания Российской Федерации начнутся Дни Республики Северная Осетия-Алания.
26.06.2017 Министерство культуры
Фильмы "Теснота" режиссера Кантемира Балагова из Нальчика выйдет в российский прокат 27 июля.
26.06.2017 Кавказский Узел
В «Зеркале мира» отразилась участница из Осетии - Газета Слово
В «Зеркале мира» отразилась участница из Осетии
Зинаида Кулиева заняла первое место в номинации "Дебют" творческого конкурса III Международной биеннале искусства горячей эмали "Зеркало мира", которая проходила с 16 мая по 10 июня в санкт-петербургской Академии Штиглица.
Газета Слово
Таймураз Тускаев поздравил соцработников Северной Осетии - Газета Слово
Таймураз Тускаев поздравил соцработников Северной Осетии
Таймураз Тускаев поздравил социальных работников Северной Осетии с профессиональным праздником на церемонии чествования в Русском академическом театре им.
Газета Слово
Во Владикавказе пройдет первый фестиваль театральной молодежи «Вне сезона» - Газета Слово
Во Владикавказе пройдет первый фестиваль театральной молодежи «Вне сезона»
  Театральные сезоны в республике закрылись, но для тех, кто хочет  продолжить культурный отдых, завтра во Владикавказе откроется  первый фестиваль театральной молодежи «Вне сезона».
Газета Слово
Валерий ГАЗЗАЕВ: «Мне жалко сборную России. Мы не готовы к чемпионату мира» - Осетинское радиоЯ посмотрел матч с Мексикой - и мне стало искренне жалко сборную России. Ее футболистов и тренерский состав.
26.06.2017 Осетинское радио
Валерий Газзаев прокомментировал игру российской сборной на Кубке конфедераций - Газета СловоЗаслуженный тренер России, замглавы комитета Госдумы по спорту Валерий Газзаев прокомментировал выступление сборной России на Кубке конфедераций.
26.06.2017 Газета Слово
Юноши-самбисты из России, Абхазии, Армении и Нагорного Карабаха приняли участие в международном турнире в Степанакерте.
26.06.2017 Кавказский Узел
Борцы из Северной Осетии выступят на юниорском первенстве в Европе - Газета Слово
Борцы из Северной Осетии выступят на юниорском первенстве в Европе
Алик Хадарцев (55 кг) и Батырбек Цакулов (96 кг) выступят на юниорском первенстве Европы по вольной борьбе, - сообщает пресс-служба минспорта.
Газета Слово
В Нижней Санибе пройдет Кубок СКФО по кантри-кроссу - Газета Слово
В Нижней Санибе пройдет Кубок СКФО по кантри-кроссу
На мотодроме в Нижней Санибе 24 июля пройдет Открытый лично-командный Кубок СКФО по кантри-кроссу, об этом газете «Слово» сообщили в пресс-службе минспорта.
Газета Слово
В рамках дней Северной Осетии в Москве команды североосетинской делегации и Совфеда сыграют в футбол - Газета Слово
В рамках дней Северной Осетии в Москве команды североосетинской делегации и Совфеда сыграют в футбол
В рамках дней Северной Осетии в Совете Федераций запланирован товарищеский матч по футболу между мужскими командами Совета Федерации и органов госвласти Северной Осетии, - сообщает пресс-служба главы.
Газета Слово
Сегодня ночью скончался человек-эпоха, Нафи Джуссойты! - Osinform.RuСегодня ночью скончался человек-эпоха! Очень жаль когда уходят великие люди!
26.06.2017 Osinform.Ru
Авиарейс «Владикавказ-Санкт-Петербург» возобновит работу в сентябре - Газета СловоАвиакомпания «Победа» возобновит рейсы из Владикавказа в Санкт-Петербург с 19 сентября 2017 года, - сообщает пресс-служба министерства промышленности и транспорта республики.
26.06.2017 Газета Слово
JPG Файл - МВД Республики Северная Осетия – АланияВ самом разгаре летний курортный сезон. Это самая жаркая пора и для сотрудников полиции, в частности, представителей подразделений по делам несовершеннолетних.
26.06.2017 МВД Республики Северная Осетия – Алания
Активисты Народного фронта обсудили вопрос создания «зеленого щита» вокруг Владикавказа - ОНФ в Северной ОсетииОпределение лесопарковых территорий вокруг Владикавказа стало главной темой разговора экспертного совещания, прошедшего в региональном отделении Общероссийского народного фронта в Северной Осетии.
26.06.2017 ОНФ в Северной Осетии
Сегодня ночью на детской площадке в городе Волгодонске Ростовской области был обнаружен четырехмесячный ребенок.
26.06.2017 Кавказский Узел