Новости Software

Facebook создала ИИ, который сможет переводить тексты между 100 языками напрямую

Facebook анонсировал новый искусственный интеллект, который сможет совершать прямые парные переводы более чем между 100 языками. Об этом Engadget рассказала научный сотрудник Facebook AI Анджела Фан (Angela Fan). Это означает, что система сможет переводить тексты без применения английского языка в качестве промежуточного.

Engadget

Engadget 

Большинство переводчиков сначала переводят тексты с источника на английский, а затем на другой иностранный язык. Из-за этого процесс получается сложным и теряется точность некоторых элементов текста. По словам Фан, новый ИИ сможет производить двунаправленные переводы (например с французского на китайский и наоборот) без использования английского. По оценке BLEU (алгоритм оценки качестве переведённого текста) качество перевода на 10 баллов выше, чем с использованием англо-ориентированной модели.

Чтобы создать новый ИИ, команда Facebook использовала сервис CommonCrawl для сбора текстовых примеров по всей Сети. После этого разработчики проанализировали весь материал при помощи системы FastText, которую компания создала несколько лет назад. В итоге удалось сформировать базу данных из 7,5 миллиардов предложений, которые система использует для перевода. 

С каким числом языков сможет в будущем работать система, пока неясно. По словам Фан, всё зависит от ресурсов, которые окажутся в распоряжении системы. У основных языков, таких как индийский, китайский или немецкий, много материала, потому что на них публикуется множество текстов в Сети. Гораздо больше проблем с языками на подобии Зулу, которые не так распространены.

Компания предоставит международному исследовательскому сообществу набор данных и моделей работы в виде открытого исходного кода. Когда систему внедрят в повседневную работу соцсети, пока неясно.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме
Прежде чем оставить комментарий, пожалуйста, ознакомьтесь с правилами комментирования. Оставляя комментарий, вы подтверждаете ваше согласие с данными правилами и осознаете возможную ответственность за их нарушение.
Все комментарии премодерируются.
Комментарии загружаются...
window-new
Soft
Hard
Тренды 🔥
Система управления ИБ-событиями KOMRAD Enterprise SIEM получила крупное обновление 3 ч.
Поисковик DuckDuckGo установил новый рекорд — 100 млн запросов за день 13 ч.
Новая статья: Scott Pilgrim vs. The World: The Game — Complete Edition — долгожданное возвращение. Рецензия 13 ч.
systemd 248 упростит использование аппаратных ключей шифрования 16 ч.
Университет Джонса Хопкинса поделился результатами исследования информационной безопасности современных смартфонов 20 ч.
Важный прецедент: Facebook заплатит $340 каждому из 1,6 млн пользователей Иллинойса 20 ч.
Apple заблокировала установку iOS-приложений на новых Mac с чипом M1 через сторонние сервисы 21 ч.
Sony удалила даты выхода игр для PS5 из трейлера к выставке CES 2021 21 ч.
Microsoft представила список эксклюзивов Xbox на 2021-й, но это не всё, что запланировано на год 22 ч.
Apple проиграла апелляцию патентному троллю VirnetX, выплаты могут превысить миллиард долларов 23 ч.