Новости Software

«Яндекс» запустил новую версию поисковика на основе нейросетей

Компания «Яндекс» объявила о запуске новой версии своей поисковой системы, основанной на алгоритме «Королёв». Как и предыдущий поисковой алгоритм «Палех», «Королёв» использует для работы нейронную сеть, но сопоставляет смысл запроса не с заголовком веб-страницы, а с её содержимым целиком. Это позволяет начинать подбор веб-страниц, соответствующих запросу по смыслу, на ранних стадиях ранжирования, тогда как при использовании «Палеха» смысловой анализ является одним из завершающих этапов. И если в «Палехе» анализируется всего 150 документов, то в «Королёве» смысловой анализ производится для 200 тысяч документов. Новый алгоритм также обращает внимание на другие запросы, по которым люди приходят на эту страницу. Это позволяет установить дополнительные смысловые связи.

Для обучения нейронной сети используется обезличенная поисковая статистика. В частности, учитывается, на какие страницы пользователи переходят по тем или иным запросам и сколько времени они там проводят. Если человек надолго «завис» на найденной в результате поиска странице, значит, поиск хорошо соответствует его запросу.

Статистика, которая используется для обучения алгоритма, обезличена

Статистика, которая используется для обучения алгоритма, обезличена

Для повышения качества поиска используется система оценок. Если раньше оценки выставляли сотрудники «Яндекса» — так называемые асессоры, то теперь этим занимаются участники сервиса Яндекс.Толока, в котором зарегистрировано более миллиона человек. За два с лишним года работы сервиса его участники дали около двух миллиардов оценок.

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме
Прежде чем оставить комментарий, пожалуйста, ознакомьтесь с правилами комментирования. Оставляя комментарий, вы подтверждаете ваше согласие с данными правилами и осознаете возможную ответственность за их нарушение.
Все комментарии премодерируются.
Комментарии загружаются...
window-new
Soft
Hard
Тренды 🔥
«Это инструмент для рассказывания историй»: CD Projekt RED подробнее рассказала о киберпространстве в Cyberpunk 2077 4 мин.
Google запустила новые инстансы с NVIDIA A100 7 мин.
Schneider Electric закрыла критические уязвимости в ПО энергетического оборудования 40 мин.
Видео: студия-разработчик Rain World намекнула на следующую игру — пока ничего не понятно 44 мин.
Порно, кино и образование: названы интересы российских интернет-пользователей на самоизоляции 60 мин.
Видео: кровавая вечеринка и никакого геймплея в дебютном трейлере Vampire: The Masquerade — Swansong 2 ч.
Как это читается?! — LinkedIn позволит загружать аудио с правильным произношением имени пользователя 2 ч.
Batman: The Enemy Within и The Walking Dead за $1: в Humble Bundle начались продажи нового сборника игр 2 ч.
«Напоминает о временах PS2»: неоднозначный геймплейный трейлер Werewolf: The Apocalypse — Earthblood 2 ч.
Видео: убийства катаной и развитие навыков боя с холодным оружием в Cyberpunk 2077 2 ч.