Новости города БезФормата.Ru
Владикавказ
Главные новости
 
Задать вопрос?

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов, разработанный специалистами АО «Айкумен ИБС»,показал наилучшие характеристики в конкурсной части состоявшейся в Москве XXIII Международной конференции «Диалог 2017», посвященной актуальной оценке уровня развития российских машинно-лингвистических технологий. При подготовке к конкурсу «умный» классификатор набрал обучающую статистику признаков из текстового корпуса объемом более миллиона слов, а для оценки точности ему было предложен массив документов из 15000 слов. В результате сравнительного тестирования на закрытой дорожке MorphoRuEval метод «Айкумен ИБС» признан победителем по точности нормализации русских слов, достигающей 92,22%. Кроме того, он занял второе место по восстановлению морфологических признаков с достоверностью свыше 93%. По мнению директора Департамента разработки АО «Айкумен ИБС» Андрея Ярового, «независимая экспертиза «DialogueEvaluation» подтвердила отличное качество морфологического анализа текстов, используемого в компании. Данный анализ является фундаментом всей текстовой аналитики, что позволяет нам с беспрецедентной точностью извлекать смысл из документов на русском языке». «Мы продолжаем двигаться вперед, постоянно совершенствуем алгоритмы и разрабатываем инновационные методы в своей работе, предоставляя возможность нашим заказчикам максимально использовать преимущества IQPLATFORM® - современного отечественного продукта в области BigData, по ряду функционала не имеющего аналогов на российском и мировом рынках» - подводит итог участия в мероприятии генеральный директор АО «Айкумен ИБС» Ирина Касаткина. Морфологический анализ выполняется на начальных этапах автоматической обработки текста и является одной из наиболее важных операций, влияющих на финальное качество анализа документов. К его задачам относится определение части речи и морфологических признаков (падеж, род, число, время, лицо и пр.) каждого слова предложения, а также нормализация - корректное восстановление начальной формы этих слов. Представленная технология лингвистической обработки позволяет более качественно и с минимальным участием человека анализировать большие объемы текстовой информации на естественных языках. Существующие методологии в этой области сконцентрированы на английском языке. Но они абсолютно несовместимы с русской языковой моделью по причине ее морфологической обогащенности более чем 300 различными комбинациями признаков. Исходя из этих особенностей, лингвистическая группа компании «Айкумен ИБС» разработала свой алгоритм, объединяющий достоинства классических способов с методами машинного обучения в виде двухступенчатой фильтрации словарного разбора: • Формирование предположений о возможных разборах слова с применением грамматического словаря. При отсутствии в библиотеке необходимого термина производится поиск наиболее похожего слова для разбора по аналогии; • Выбор оптимального варианта признака из контекста предложения с помощью самообучаемого классификатора на основе линейной машины опорных векторов SVM (SupportVectorMachine). Для дополнительной проверки каждого разбора применяется общая оценка из суммы оценок входящих в него признаков, а в качестве оптимального выбирается разбор с максимальной оценкой. Роль указанных признаков играют различные комбинации префиксов, суффиксов и отдельных морфологических характеристик слов в пределах контекстного окна размером ±3 слова от анализируемого. Научно-практический форум «Диалог» ежегодно собирает ведущих ученых, мировых экспертов и отраслевых вендоров для обсуждения передовых методов компьютерной лингвистики и обмена опытом создания прикладных решений по интеллектуальному анализу текстов на естественных языках. Наибольшим интересом в программе конференции-2017 пользовался конкурс MorphoRuEval, организованный лабораторией «DialogueEvaluation» для тестирования инструментов морфологического анализа русскоязычных текстов из сети Интернет. В этом году в нем приняли участие 15 команд, представляющих компании ABBYY, OnPositive, Pullenti, Samsung R&D и «Айкумен ИБС», а также университеты МФТИ, НИУ ВШЭ, ИСП РАН, МГУ, МИЭМ и НГУ. Пресс-служба Ростелекома

 

Последние новости Северной Осетии-Алании по теме:
Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
19:02 20.06.2017 Vestiyuga.Ru
Технологии машинного обучения группы компаний «Ростелеком» признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
17:22 20.06.2017 Осетинское радио
Так, перед заседанием в Бельгии Соединенные Штаты передали членам НАТО новые доказательства возможного нарушения Россией Договора о РСМД.
11.12.2017 Vestiyuga.Ru
Республика хочет предложить инвесторам прямые поставки продукции, включение в уже существующие предприятия или создание новых,
10.12.2017 Осетинское радио
Перспективы применения технологии блокчейн в профилактике коррупционных и иных правонарушений обсудили сегодня в столице республики на всероссийской научно-практической конференции.
10.12.2017 Осетинское радио
Украинский замминистра призвал раздробить Россию - Осетинское радиоЗаместитель министра по вопросам временно оккупированных территорий и внутренне перемещенных лиц Украины Георгий Тука призвал к прагматическому подходу к отношениям с Россией.
10.12.2017 Осетинское радио
Дорогие ветераны! Уважаемые коллеги! В 1949 году 10 декабря был подписан приказ № 785 «Об организации комиссии по приемке станционных сооружений Автоматической телефонной станции МВД СССР».
10.12.2017 МВД Республики Северная Осетия – Алания
Технологию блокчейна собирается применить республика в борьбе с коррупцией - Газета Слово  В Северной Осетии протестируют разработку местных специалистов блокчейн, позволяющую выявлять и предотвращать подделку электронных данных, в частности связанных с изменением лотов при государственных закупках.
09.12.2017 Газета Слово
Управление Генпрокуратуры в СКФО провело проверку деятельности АО «Корпорация развития Северного Кавказа» и выявило многочисленные нарушения В числе нарушений — несоответствие итогов работы компании целевым показателям,
09.12.2017 Yuga.Ru
Состояние одной из пострадавших оценивается как сравнительно тяжелое, сообщили в батумском центре скорой медицинской помощи.
11.12.2017 Кавказский Узел
Скриншот публикации Михаила Голда в Facebook от 10.12.17 г. о взрыве в Батуми - Кавказский УзелОдна из пяти пострадавших при взрыве в жилом доме в Батуми госпитализирована в тяжелом состоянии.
10.12.2017 Кавказский Узел
Три человека в масках, вооруженные автоматами, ворвались в здание администрации Ткуарчалского района Абхазии и связали охранника.
10.12.2017 Кавказский Узел
Экс-сотруднику полиции, до смерти избившему свою жену, грозит 15 лет лишения свободы - Газета Слово
Экс-сотруднику полиции, до смерти избившему свою жену, грозит 15 лет лишения свободы
Бывшему сотруднику ГИБДД по Северной Осетии, избившему свою жену, предъявлено окончательное обвинение в «умышленном причинение тяжкого вреда здоровью, повлекшем по неосторожности смерть» (ч.
Газета Слово
«Любительница сыра» подозревается в серийном мошенничестве - Газета Слово
«Любительница сыра» подозревается в серийном мошенничестве
  Полицейские Северной Осетии задержали серийную мошенницу, жертвами которой стали более 20 жителей республики.
Газета Слово
Кровавый Джако - Газета Слово
Кровавый Джако "прикрылся" аэрофобией
  Криминального авторитета Аслана Гагиева, обвиняемого в организации 60 убийств, не депортировали из Австрии в Россиию,
Газета Слово
К 100-ЛЕТИЮ ВЕЛИКОЙ РОССИЙСКОЙ РЕВОЛЮЦИИ - СКГМИ(ГТУ)В Научном центре СКГМИ состоялась научно-теоретическая конференция, посвященная 100-летию Великой Российской революции.
11.12.2017 СКГМИ(ГТУ)
Заседание Коллегии Комитета по охране и использованию объектов культурного наследия РСО-Алания - Комитет по охране и использованию объектов культурного наследияПод руководством председателя Комитета по охране и использованию объектов культурного наследия РСО-Алания В. З. Салбиева состоялось заседание Коллегии Комитета по охране и использованию объектов культурного наследия РСО-Алания.
11.12.2017 Комитет по охране и использованию объектов культурного наследия
region15.ru_img_0099 - Министерство культурыГосударственный академический ансамбль танца «Алан» , руководимый Русланом Тедеевым, 7 декабря выступит в Государственном драматическом театре г.Черкесск,
08.12.2017 Министерство культуры
Валерий Гергиев возглавит оркестр музыкального фестиваля в Вербье - Газета Слово
Валерий Гергиев возглавит оркестр музыкального фестиваля в Вербье
Дирижер Валерий Гергиев займет в 2018 году пост руководителя оркестра Международного музыкального фестиваля в Вербье (Швейцария) — одного из самых престижных музыкальных смотров, сообщили в пресс-службе Мариинского театра.
Газета Слово
Вероника Джиоева и MiyaGi & Эндшпиль номинированы на Российскую национальную музыкальную премию - Газета Слово
Вероника Джиоева и MiyaGi & Эндшпиль номинированы на Российскую национальную музыкальную премию
  Уроженцы Осетии оперная певица Вероника Джиоева и рэперы MiyaGi & Эндшпиль могут стать обладателями Российской национальной музыкальной премии.
Газета Слово
Диплом - Газета Слово
Диплом "Фестиваля зодчества" получил фильм о здании Музея Терской области
Фильм о памятнике архитектуры - Музее Терской области получил диплом международного «Фестиваля зодчества 2017» в номинации «Лучший фильм об архитектуре и архитекторах».
Газета Слово
Матч 20 тура чемпионата России по футболу между клубами "Ростов" и "Уфа" завершился со счетом 1:0 в пользу ростовской команды.
10.12.2017 Кавказский Узел
Победоносный - Осетинское радиоГеоргий Челохсаев о боксерской мечте, дружбе с Гассиевым, дипломе повара, безразличии чиновников и позитивном мышлении.
10.12.2017 Осетинское радио
Тренер Мурата Гассиева верит в победу своего воспитанника - Осетинское радиоЗаслуженный тренер России и Южной Осетии Виталий Сланов - тренер чемпиона мира по версии IBF Мурата Гассиева,
10.12.2017 Осетинское радио
Российские лыжники поедут на Олимпиаду-2018 под нейтральным флагом - Газета Слово
Российские лыжники поедут на Олимпиаду-2018 под нейтральным флагом
Российские лыжники провели голосование, по итогам которого решили ехать на Олимпийские игры-2018 в Пхенчхане, заявила агентству "Р-Спорт" глава Федерации лыжных гонок России (ФЛГР) Елена Вяльбе.
Газета Слово
Алана Кочиева взяла «золото» на всероссийских  соревнованиях по каратэ «Надежды России» - Газета Слово
Алана Кочиева взяла «золото» на всероссийских соревнованиях по каратэ «Надежды России»
  Алана Кочиева заняла первое место в Санкт-Петербурге на Всероссийских соревнованиях по каратэ «Надежды России» среди юношей и девушек (14-15 лет), юниоров и юниорок (16-17 лет, 18-20 лет),
Газета Слово
Таймазов призывает поддержать выступление российских спортсменов на Олимпиаде в Корее - Газета Слово
Таймазов призывает поддержать выступление российских спортсменов на Олимпиаде в Корее
Депутат Госдумы Артур Таймазов призывает поддержать выступление российских спортсменов в зимней Олимпиаде в Корее.
Газета Слово
Акция в ЭМК «Сломай сигарету – получи конфету!» - Министерство образования и наукиАкцию «Сломай сигарету – получи конфету!» провели активисты Эльхотовского многопрофильного колледжа во главе с преподавателем Беллой Хугаевой.
11.12.2017 Министерство образования и науки
Сенатор Клинцевич: Россия "плевать хотела на санкции" - Осетинское радиоСША, которые ни на минуту не задумываясь нарушают любые договора, если считают это выгодным для себя, очень любят обвинять в подобных действиях других.
11.12.2017 Осетинское радио
9 декабря в России  - памятная дата. В такой же зимний день 1769 года Екатерина II учредила орден Святого Георгия - высшую военную награду.
09.12.2017 МВД Республики Северная Осетия – Алания
Срок предварительной продажи билетов на поезда увеличен до 90 дней - Газета СловоС 10 декабря срок предварительной продажи билетов на поезда увеличен до 90 суток, то есть до трех месяцев.
10.12.2017 Газета Слово
Опасность схода лавин объявлена в горах Кабардино-Балкарии, Ингушетии и Северной Осетии.
10.12.2017 Кавказский Узел