MWC 2018
2018
Computex
IFA 2018
Спустя более двадцати лет после того, как Джоан Роулинг (Joanne Rowling) открыла миру волшебную вселенную, главный персонаж её книг, Гарри Поттер (Harry Potter) обрёл новую актуальность в совершенно иной области — области исследований искусственного интеллекта. На это обращает внимание Bloomberg.
Источник изображений: wizardingworld.com
Бестселлеры о Гарри Поттере всё чаще используются для экспериментов с технологиями ИИ из-за непреходящего влияния серии на массовую культуру, широкого спектра языковых данных и сложной игры слов на страницах книг. Список исследований и научных статей, ссылающихся на Гарри Поттера, даёт представление о передовых проектах в области ИИ и некоторых сложнейших вопросах, стоящих перед этой областью.
В научной статье «Кто такой Гарри Поттер?» описывается методика, помогающая большим языковым моделям выборочно забывать информацию. Это важная задача для области ИИ: большие языковые модели обучаются на огромных массивах онлайн-данных, включая защищённые авторским правом материалы и прочий проблемный контент — в результате на разработчиков этих систем всё чаще подают в суд, а их работы привлекают всё более пристальное внимание общественности. Авторы статьи, сотрудники Microsoft Марк Руссинович (Mark Russinovich) и Ронен Элдан (Ronen Eldan), продемонстрировали, что ИИ-модели можно изменять, удаляя любую информацию о существовании книг о Гарри Поттере, включая персонажей и сюжеты, не жертвуя при этом творческими и аналитическими способностями системы. Учёные говорят, что выбрали книги о юном волшебнике из-за их известности — об элементах сюжета и персонажах знают даже те, кто их не читал.
Схожие вопросы поднимают в своём исследовании (PDF) учёные Вашингтонского университета в Сиэтле, Калифорнийского университета в Беркли и Института искусственного интеллекта Аллена. Они разработали языковую модель Silo, в которой поддерживается удаление данных для снижения юридических рисков. Исследователи обращают внимание, что если исключить из обучающего массива защищённые авторским правом материалы и правительственные документы, и оставить только тексты с низким уровнем риска, то производительность модели снижается. Удаляя книги о Гарри Поттере из обучающих массивов, они обнаружили повышение перплексии — коэффициента неопределённости, на основе которой оценивается качество языковой модели: чем он ниже, тем более качественный результат выдаёт ИИ.
Исследователи ИИ цитируют Гарри Поттера не менее десяти лет, и сегодня книги о нём упоминаются в работах всё чаще, поскольку и учёные, и технологии всё больше сосредоточены на инструментах ИИ, помогающих в обработке естественного языка и механизмов реакции на него. Присутствующее в книгах о Гарри Поттере «обилие сцен, диалогов, эмоциональных моментов делает его очень актуальным для конкретной области обработки естественного языка», отметила исследователь университета Карнеги Меллона Лейла Вебе (Leila Wehbe), которая в 2014 году провела серию экспериментов, собирая данные МРТ у читающих книги о юном волшебнике людей, чтобы глубже изучить языковые механизмы.
Поиск на открытом портале arXiv.org среди недавних публикаций показывает такие наименования статей как «Машинное обучение при создании зелий в Хогвартсе», «Гарри Поттер и большие языковые модели», а также «Обнаружение заклинаний в фентезийной литературе с помощью искусственного интеллекта на основе [архитектуры] трансформера». В некоторых проектах Гарри Поттер хотя и не оказывается центральным объектом исследования, но остаётся любимым литературным персонажем учёных. В одном из исследований книги Роулинг используются для оценки уровня интеллекта ИИ-систем. А, по мнению Терренса Сейновски (Terrence Sejnowski), руководителя лаборатории вычислительной нейробиологии при Институте биологических исследований Солка, чат-боты просто отражают интеллект и предубеждения своих пользователей, как «Зеркало Еиналеж» из первой книги о Гарри Поттере, которое показывало самые сокровенные желания каждому, кто в него смотрел. «Гарри Поттер популярен среди молодых исследователей. Они читали их [эти книги] в детстве или в юности, вот и выбирают их в качестве письменных или устных массивов текста», — заключила доцент Вебе.
Источник:
