Новости Software

«Яндекс» запустил гибридную систему перевода

Компания «Яндекс» объявила о внедрении гибридной системы перевода: ожидается, что новый подход позволит повысить качество выдаваемых результатов.

Сервис «Яндекс.Переводчик» изначально использовал статистическую модель. При переводе она разделяет предложения на куски (отдельные слова и фразы) и для каждого из них подбирает все возможные переводы с указанием их вероятности. Затем система составляет из переведённых фрагментов разные варианты нового предложения. Выбирается тот вариант, который содержит переводы с высокими вероятностями и в котором фрагменты хорошо сочетаются друг с другом.

Достоинством метода является то, что система хорошо запоминает и переводит редкие и сложные слова и фразы. Недостаток — «машинность» перевода: текст как бы собран из отдельных кусков.

Теперь к статистическому переводу добавляется перевод на основе нейронной сети. Как и статистический переводчик, нейронная сеть анализирует массив параллельных текстов и учится находить в них закономерности. При этом логика несколько иная: нейросеть работает с целыми предложениями, то есть не происходит дробление на слова и фразы. Такой подход, как утверждается, позволяет учесть смысловые связи внутри предложения, то есть понять контекст. В результате, перевод получается более естественным.

Но у нейросетевого перевода тоже есть свои недостатки: если по каким-то причинам системе не удаётся перевести то или иное предложение, она начинает попросту угадывать правильный ответ.

Поэтому «Яндекс» внедрил гибридную систему. Теперь перевод выполняют обе модели, а затем алгоритм на основе метода машинного обучения CatBoost сравнивает результаты и предлагает лучший.

Сейчас гибридная система используется в веб-версии «Яндекс.Переводчика» для переводов с английского языка на русский. В ближайшие месяцы она заработает и для других направлений. 

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме
Прежде чем оставить комментарий, пожалуйста, ознакомьтесь с правилами комментирования. Оставляя комментарий, вы подтверждаете ваше согласие с данными правилами и осознаете возможную ответственность за их нарушение.
Все комментарии премодерируются.
Комментарии загружаются...
window-new
Soft
Hard
Тренды 🔥
Облачная Switch-версия Dying Light 2 не выйдет вместе с остальными 20 мин.
Новая статья: Верной дорогой: обзор мобильных приложений для пешей навигации 7 ч.
В Instagram появились платные подписки — пока лишь на 10 аккаунтов из США 10 ч.
Apple заявила, что возможность остаться на iOS 14 всегда было временным решением 10 ч.
FIFA 22 оказалась единоличным лидером продаж в европейской рознице за 2021 год, а россияне больше предпочитали GTA V 11 ч.
Google пообещала прекратить показывать детям рекламу товаров для взрослых 11 ч.
Администрация Байдена устанавливает новые требования к защищённым сетям США 11 ч.
Twitter снова оштрафовали в России на 10 млн рублей за неудаление запрещённой информации 11 ч.
Opera выпустила бету Web3-браузера со встроенным крипто-кошельком 11 ч.
Apple и Google резко раскритиковали антимонопольные законопроекты США — более мелкие компании наоборот их поддерживают 12 ч.
IDC: китайские производители чипов на три-четыре поколения отстают от лидеров индустрии 36 мин.
ASML: к 2025 году дефицит чипов может смениться лёгким перепроизводством 46 мин.
Каждый из необходимых Intel для работы с техпроцессом 18A сканеров ASML будет стоить более $340 млн 2 ч.
Рост цен на память вывел Samsung на первое место по выручке среди поставщиков полупроводниковых компонентов 2 ч.
Представлен планшет Lenovo 10w на Arm и Windows 11, а также ноутбук Lenovo Yoga 13w 8 ч.
В России создали уникальные iPhone 13 Pro, на которые золотом нанесут QR-код владельца 8 ч.
Новая статья: Знакомство с Ampere Altra Q80-30: не умением, так числом? 9 ч.
Игровой планшет Lenovo Legion Y700 получит 8,8-дюймовый экран с высокими разрешением и частотой 10 ч.
Квантовые вычисления помогут Hyundai улучшить характеристики электромобильных аккумуляторов 11 ч.
Скандал с харассментом в Activision Blizzard помог Microsoft купить компанию 12 ч.