Сегодня 24 декабря 2024
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Генеративный ИИ не понимает устройство мира, показало исследование MIT

Генеративные ИИ-модели будоражат воображение руководителей многих компаний, обещая автоматизацию и замену миллионов рабочих мест. Однако учёные Массачусетского технологического института (MIT) предостерегают: ИИ хотя и даёт правдоподобные ответы, в действительности не обладает пониманием сложных систем и ограничивается предсказаниями. В задачах реального мира, будь то логические рассуждения, навигация, химия или игры, ИИ демонстрирует значительные ограничения.

 Источник изображения: HUNGQUACH679PNG / Pixabay

Источник изображения: HUNGQUACH679PNG / Pixabay

Современные большие языковые модели (LLM), такие как GPT-4, создают впечатление продуманного ответа на сложные запросы пользователей, хотя на самом деле они лишь точно предсказывают наиболее вероятные слова, которые следует поместить рядом с предыдущими в определённом контексте. Чтобы проверить, способны ли ИИ-модели действительно «понимать» реальный мир, учёные MIT разработали метрики, предназначенные для объективной проверки их интеллектуальных способностей.

Одной из задач эксперимента стала оценка способности ИИ к генерации пошаговых инструкций для навигации по улицам Нью-Йорка. Несмотря на то что генеративные ИИ в определённой степени демонстрируют «неявное» усвоение законов окружающего мира, это не является эквивалентом подлинного понимания. Для повышения точности оценки исследователи создали формализованные методы, позволяющие анализировать, насколько корректно ИИ воспринимает и интерпретирует реальные ситуации.

Основное внимание в исследовании MIT было уделено трансформерам — типу генеративных ИИ-моделей, используемых в таких популярных сервисах, как GPT-4. Трансформеры обучаются на обширных массивах текстовых данных, что позволяет им достигать высокой точности в подборе последовательностей слов и создавать правдоподобные тексты.

Чтобы глубже исследовать возможности таких систем, учёные использовали класс задач, известных как детерминированные конечные автоматы (Deterministic Finite Automaton, DFA), которые охватывают такие области, как логика, географическая навигация, химия и даже стратегии в играх. В рамках эксперимента исследователи выбрали две разные задачи — вождение автомобиля по улицам Нью-Йорка и игру в «Отелло», чтобы проверить способность ИИ правильно понимать лежащие в их основе правила.

Как отметил постдок Гарвардского университета Кейон Вафа (Keyon Vafa), ключевая цель эксперимента заключалась в проверке способности ИИ-моделей восстанавливать внутреннюю логику сложных систем: «Нам нужны были испытательные стенды, на которых мы точно знали бы, как выглядит модель мира. Теперь мы можем строго продумать, что значит восстановить эту модель мира».

Результаты тестирования показали, что трансформеры способны выдавать корректные маршруты и предлагать правильные ходы в игре «Отелло», когда условия задач точно определены. Однако при добавлении усложняющих факторов, таких как объездные пути в Нью-Йорке, ИИ-модели начали генерировать нелогичные варианты маршрутов, предлагая случайные эстакады, которых на самом деле не существовало.

Исследование MIT показало принципиальные ограничения генеративных ИИ-моделей, особенно в тех задачах, где требуется гибкость мышления и способность адаптироваться к реальным условиям. Хотя существующие ИИ-модели могут впечатлять своей способностью генерировать правдоподобные ответы, они остаются всего лишь инструментами предсказания, а не полноценными интеллектуальными системами.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Вечерний 3DNews
Каждый будний вечер мы рассылаем сводку новостей без белиберды и рекламы. Две минуты на чтение — и вы в курсе главных событий.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Nvidia App получило обновление, которое исправило замедление игр — «тормозящие» фильтры теперь отключены по умолчанию 24 мин.
Microsoft перестала полагаться только на ИИ-разработки OpenAI 29 мин.
Индустрия компьютерных клубов в России по итогам 2024 года достигла 25 миллиардов рублей и «продолжит расти ещё в течение четырёх−пяти лет» 2 ч.
VK представила платформу OpenVK для публикации открытого ПО, причём не только своего 2 ч.
Анимационный сериал «Аркейн» по League of Legends оказался финансовым провалом, но для Riot важно другое 2 ч.
Главные бестселлеры Steam в 2024 году: Black Myth: Wukong, Warhammer 40,000: Space Marine 2, Helldivers 2 и другие 5 ч.
Подписка Premium+ для пользователей социальной сети X подорожала до $22 8 ч.
VK Tech: российские компании всё чаще развёртывают коммуникационные решения on-premise 8 ч.
Ветер перемен: разработчики Total War перестанут продавать кровь как DLC и откажутся от собственного лаунчера 16 ч.
Фанаты Rockstar убедили себя, что второй трейлер GTA VI выйдет 27 декабря 17 ч.
HP готовит мощный игровой ноутбук Omen Max 16 с 24-ядерным Core Ultra 9 275HX и GeForce RTX 5080 27 мин.
Rigetti Computing открыла облачный доступ к одному из мощнейших квантовых компьютеров в мире 38 мин.
«Открытые сетевые технологии» закрылись — ассоциация выполнила свои задачи 2 ч.
Наушники Noble Audio предлагают кристально чистый звук, качественное исполнение и высокую автономность 2 ч.
Бразильские власти одобрили создание гигантского «ИИ-города» Scala Data Centers 3 ч.
Процессоры Apple M5 Pro, M5 Max и M5 Ultra обеспечат производительность серверного уровня 3 ч.
США планируют внести в чёрный список компанию Sophgo — она подозревается в выпуске на TSMC ИИ-чипов в интересах Huawei 4 ч.
«Аэродиск» организовал серийное производство СХД на мощностях «Аквариуса» в Твери 4 ч.
CATL придумала, как защитить электромобильные батареи от возгораний при авариях на высокой скорости 4 ч.
Представлена цельнометаллическая механическая клавиатура Icebreaker за $2100 5 ч.