Новости города БезФормата.Ru
Владикавказ
Главные новости
 
Задать вопрос?

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов, разработанный специалистами АО «Айкумен ИБС»,показал наилучшие характеристики в конкурсной части состоявшейся в Москве XXIII Международной конференции «Диалог 2017», посвященной актуальной оценке уровня развития российских машинно-лингвистических технологий. При подготовке к конкурсу «умный» классификатор набрал обучающую статистику признаков из текстового корпуса объемом более миллиона слов, а для оценки точности ему было предложен массив документов из 15000 слов. В результате сравнительного тестирования на закрытой дорожке MorphoRuEval метод «Айкумен ИБС» признан победителем по точности нормализации русских слов, достигающей 92,22%. Кроме того, он занял второе место по восстановлению морфологических признаков с достоверностью свыше 93%. По мнению директора Департамента разработки АО «Айкумен ИБС» Андрея Ярового, «независимая экспертиза «DialogueEvaluation» подтвердила отличное качество морфологического анализа текстов, используемого в компании. Данный анализ является фундаментом всей текстовой аналитики, что позволяет нам с беспрецедентной точностью извлекать смысл из документов на русском языке». «Мы продолжаем двигаться вперед, постоянно совершенствуем алгоритмы и разрабатываем инновационные методы в своей работе, предоставляя возможность нашим заказчикам максимально использовать преимущества IQPLATFORM® - современного отечественного продукта в области BigData, по ряду функционала не имеющего аналогов на российском и мировом рынках» - подводит итог участия в мероприятии генеральный директор АО «Айкумен ИБС» Ирина Касаткина. Морфологический анализ выполняется на начальных этапах автоматической обработки текста и является одной из наиболее важных операций, влияющих на финальное качество анализа документов. К его задачам относится определение части речи и морфологических признаков (падеж, род, число, время, лицо и пр.) каждого слова предложения, а также нормализация - корректное восстановление начальной формы этих слов. Представленная технология лингвистической обработки позволяет более качественно и с минимальным участием человека анализировать большие объемы текстовой информации на естественных языках. Существующие методологии в этой области сконцентрированы на английском языке. Но они абсолютно несовместимы с русской языковой моделью по причине ее морфологической обогащенности более чем 300 различными комбинациями признаков. Исходя из этих особенностей, лингвистическая группа компании «Айкумен ИБС» разработала свой алгоритм, объединяющий достоинства классических способов с методами машинного обучения в виде двухступенчатой фильтрации словарного разбора: • Формирование предположений о возможных разборах слова с применением грамматического словаря. При отсутствии в библиотеке необходимого термина производится поиск наиболее похожего слова для разбора по аналогии; • Выбор оптимального варианта признака из контекста предложения с помощью самообучаемого классификатора на основе линейной машины опорных векторов SVM (SupportVectorMachine). Для дополнительной проверки каждого разбора применяется общая оценка из суммы оценок входящих в него признаков, а в качестве оптимального выбирается разбор с максимальной оценкой. Роль указанных признаков играют различные комбинации префиксов, суффиксов и отдельных морфологических характеристик слов в пределах контекстного окна размером ±3 слова от анализируемого. Научно-практический форум «Диалог» ежегодно собирает ведущих ученых, мировых экспертов и отраслевых вендоров для обсуждения передовых методов компьютерной лингвистики и обмена опытом создания прикладных решений по интеллектуальному анализу текстов на естественных языках. Наибольшим интересом в программе конференции-2017 пользовался конкурс MorphoRuEval, организованный лабораторией «DialogueEvaluation» для тестирования инструментов морфологического анализа русскоязычных текстов из сети Интернет. В этом году в нем приняли участие 15 команд, представляющих компании ABBYY, OnPositive, Pullenti, Samsung R&D и «Айкумен ИБС», а также университеты МФТИ, НИУ ВШЭ, ИСП РАН, МГУ, МИЭМ и НГУ. Пресс-служба Ростелекома

 

Последние новости Северной Осетии-Алании по теме:
Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов

Технологии машинного обучения группы компаний Ростелеком признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
19:02 20.06.2017 Vestiyuga.Ru
Технологии машинного обучения группы компаний «Ростелеком» признаны лучшими в морфологическом анализе текстов - Владикавказ
Самообучаемый алгоритм морфологического анализа и нормализации русскоязычных текстов,
17:22 20.06.2017 Осетинское радио
В рамках ежегодного проекта некоммерческой ассоциации "Renaissance Sandidzan" "Дни осетинской культуры в Европе" в Пезаро открылась выставка осетинских художников.
16.10.2017 Vestiyuga.Ru
В итальянском Пезаро открылась выставка осетинских художников - ГТРК АланияВ рамках ежегодного проекта некоммерческой ассоциации "Renaissance Sandidzan" "Дни осетинской культуры в Европе" в Пезаро открылась выставка осетинских художников.
16.10.2017 ГТРК Алания
СЕВЕРНАЯ ОСЕТИЯ ПРЕДСТАВИТ ЮЖНОКОРЕЙСКОМУ БИЗНЕСУ РЯД ПРОЕКТОВ В ОБЛАСТИ ПРОМЫШЛЕННОСТИ И ТУРИЗМА - Министерство экономического развитияГлава Северной Осетии Вячеслав Битаров планирует принять участие в деловом форуме «Бизнес в России: региональные возможности для корейского бизнеса», который пройдет 25 октября 2017 года в Сеуле Республики Корея.
16.10.2017 Министерство экономического развития
Уроженцы Дагестана, задержанные по подозрению в причастности к запрещенной в России террористической организации "Исламское государство", дали признательные показания,
15.10.2017 Кавказский Узел
  Хореограф из Великобритании Франциско Гомес дал шанс танцору из Осетии Геогию Кокоеву попасть на шоу "Танцы" на ТНТ, во время отборочного этапа.
15.10.2017 Газета Слово
Осман Османов, возглавлявший Буйнакск до 2001 года, скончался сегодня ночью после длительной болезни, сообщил источник.
14.10.2017 Кавказский Узел
Стремительное развитие информационных технологий XXI века внедряется во все стороны жизни.
14.10.2017 МВД Республики Северная Осетия – Алания
Уроженцы Дагестана, задержанные в Москве и Махачкале, планировали нападения на участников фестиваля молодежи и студентов, рассказал сегодня источник.
16.10.2017 Кавказский Узел
После взрыва и пожара около автозаправки в столице Грузии два человека сегодня были госпитализированы, еще одному врачи оказали помощь на месте происшествия.
16.10.2017 Кавказский Узел
Один человек погиб и трое госпитализированы после ДТП в Мясниковском районе.
16.10.2017 Кавказский Узел
Житель Ольгинского до смерти избил знакомого и бросил в овраг
Житель Ольгинского избил до смерти своего знакомого из Брута и бросил в овраг.
Газета Слово
МВД опровергло информацию о минировании шести объектов города - Газета Слово
МВД опровергло информацию о минировании шести объектов города
Сотрудники правоохранительных органов не нашли опасных предметов в шести объектах Владикавказа, которые были оцеплены после анонимных звонков о минировании, сообщает пресс-служба МВД республики.
Газета Слово
Во Владикавказ доставлены трое пострадавших альпинистов с горы Казбек - Газета Слово
Во Владикавказ доставлены трое пострадавших альпинистов с горы Казбек
Во Владикавказ на вертолете доставлены еще трое пострадавших, двое из которых сорвались накануне с горы Казбек, сообщает пресс-служба МЧС республики.
Газета Слово
IMG_8210 - Министерство культурыНа состоявшемся в Северо-Осетинском государственном академическом театре им.В.Тхапсаева открытии сезона министр культуры РСО-А Руслан Мильдзихов тепло поздравил с 85-летним юбилеем любимца театралов Осетии,
16.10.2017 Министерство культуры
Путин распорядился отпраздновать 1100-летие крещения Алании - ГТРК АланияПрезидент России Владимир Путин распорядился на государственном уровне отпраздновать в 2022 году 1100-летие крещения Северной Осетии.
16.10.2017 ГТРК Алания
Зюганов: у Осетии самый - Газета СловоВыставочную экспозицию Северной Осетии на Всемирном фестивале молодежи и студентов в Сочи посетил председатель ЦК КПРФ Геннадий Зюганов, где он попробовал осетинские пироги, которые ему очень понравились.
16.10.2017 Газета Слово
Документальный спектакль о подростках поставят во Владикавказе
  Драматурги Самары и Северной Осетии вместе с психологами поставят документальный спектакль о подростках, премьера которого состоится в ноябре этого года,
Газета Слово
Ансамбли Осетии попытаются выиграть главный хореографический конкурс - Газета Слово
Ансамбли Осетии попытаются выиграть главный хореографический конкурс
  Ансамбли «Фидан» и «Нарты» примут участие в главном хореографическом конкурсе 2017 года «Кубок победителей» в Сочи с призовым фондом в один миллион рублей.
Газета Слово
Кадеты смогут бесплатно посетить музеи - Газета Слово
Кадеты смогут бесплатно посетить музеи
Курсанты Суворовского  военного училища  17 октября смогут бесплатно посетить музеи Северной Осетии.
Газета Слово
«Спартак» проиграл в Армавире - ГТРК АланияНакануне в 14-м туре владикавказский «Спартак» в гостях играл с лидером зоны «Юг» - клубом «Армавир».
16.10.2017 ГТРК Алания
Во Владикавказе завершился турнир по хоккею среди любительских команд «Кубок Алании- 2017».
16.10.2017 ГТРК Алания
Игра между футболистами "Ростова" и "Рубина" закончилась со счетом 1:0 в пользу казанской команды.
15.10.2017 Кавказский Узел
Во Владикавказе стартовал VII фестиваль «Мирный Кавказ» - Газета Слово
Во Владикавказе стартовал VII фестиваль «Мирный Кавказ»
Открытый всероссийский культурно-спортивный фестиваль «Мирный Кавказ» собрал команды Северо-Кавказского Федерального округа,  среди которых определятся лучшие спортсмены в 10 видах.
Газета Слово
Осетинские школьники примут участие в фестивале ГТО в Артеке - Газета Слово
Осетинские школьники примут участие в фестивале ГТО в Артеке
Сборная команда школьников  Северной Осетии примет участие в фестивале Всероссийского физкультурно-спортивного комплекса "Готов к труду и обороне" среди обучающихся образовательных организаций,
Газета Слово
Алан Дзагоев и Владимир Габулов - претенденты на премию - Газета Слово
Алан Дзагоев и Владимир Габулов - претенденты на премию "Джентльмен года" 2017
Осетинские футболисты Алан Дзагоев и Владимир Габулов претендуют на премию "Джентльмен года" - 2017, об этом газете "Слово" сообщила PR-агент футболистов Премьер-лиги и сборной России Дарья Арсланова.
Газета Слово
Зюганов: у Осетии самый - Газета СловоВыставочную экспозицию Северной Осетии на Всемирном фестивале молодежи и студентов в Сочи посетил председатель ЦК КПРФ Геннадий Зюганов, где он попробовал осетинские пироги, которые ему очень понравились.
16.10.2017 Газета Слово
Движение по Военно-Грузинской дороге запрещено для большегрузов - ГУ МЧСС 09.15 16 октября 2017 года до особого распоряжения запрещено движение большегрузных автотранспортных средств на участке г. Владикавказ - н.п.
16.10.2017 ГУ МЧС
КОЛЛЕКТИВ МИНЭКОНОМРАЗВИТИЯ РЕСПУБЛИКИ ПРИНЯЛ УЧАСТИЕ В ПАМЯТНЫХ МЕРОПРИЯТИЯХ, ПРИУРОЧЕННЫХ КО ДНЮ РОЖДЕНИЯ КОСТА ХЕТАГУРОВА - Министерство экономического развитияЦеремония началась с возложения цветов к могиле основоположника осетинской литературы в пантеоне осетинской церкви.
16.10.2017 Министерство экономического развития
Краснодарский краевой суд отказался удовлетворить жалобу Гвашева, оштрафованного за молитву у тюльпанового дерева.
16.10.2017 Кавказский Узел
Мединский: Северо-Кавказскую киностудию следует передать Северной Осетии - ГТРК АланияСеверо-Кавказскую киностудию могут передать Северной Осетии. Такую идею, по сообщению ТАСС, озвучил министр культуры России Владимир Мединский на встрече с работниками культуры Свердловской области в Екатеринбурге.
16.10.2017 ГТРК Алания