Сегодня 16 апреля 2024
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

«Сбер» обновил GigaChat — ИИ-чат-бот получил одну из крупнейших нейросетей на русском языке

В рамках международной конференции по искусственному интеллекту AI Journey разработчики «Сбера» представили новую версию чат-бота GigaChat, основой которого стала одна из самых продвинутых больших языковых моделей (LLM) для русского языка с 29 млрд параметров. В скором времени доступ к API новой версии алгоритма получат бизнес-клиенты «Сбера», что позволит им создавать собственные решения на базе GigaChat, а также участники академического сообщества для проведения исследований.

 Источник изображения: sber.ru

Источник изображения: sber.ru

Использование новой LLM позволяет чат-боту лучше следовать инструкциям и выполнять сложные задания. Существенно повысилась качество суммаризации, рерайтинга, редактирования текстов и ответов на различные вопросы. Разработчики сравнили ответы новой и предыдущей моделей и зафиксировали общее повышение качества на 23 %. В дополнение к этому с фактологией новая модель справляется на 25 % лучше предшественницы.

Для повышения качества работы LLM было проведено множество экспериментов по наращиванию эффективности её обучения. К примеру, использовался фреймворк для обучения больших языковых моделей с возможностью шардирования весов нейросети по видеокартам, за счёт чего удалось сократить потребление памяти на них. Результат внутренней оценки в бенчмарке Massive Multitask Language Understanding показал, что версия GigaChat с 29 млрд параметров превосходит самый популярный открытый аналог LLaMA 2 34B.

«Обучение моделей, лежащих в основе GigaChat, — это масштабный и сложный вычислительный проект, прежде мы не делали ничего подобного. Суммарное количество вычислительных операций почти в 6 раз превысило количество операций при обучении модели ruGPT-3 с 13 млрд параметров в 2021 году. Также специально для GigaChat мы собрали и развиваем уникальный датасет, над которым работают сотни сотрудников «Сбера», помогая развивать и улучшать качество ответов в самых разных доменах. Благодаря этим усилиям пользователи с каждым новым релизом GigaChat получают максимум от сервиса для решения своих задач», — рассказал Андрей Белевцев, старший вице-президент, руководитель блока «Технологии» Сбербанка.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Вечерний 3DNews
Каждый будний вечер мы рассылаем сводку новостей без белиберды и рекламы. Две минуты на чтение — и вы в курсе главных событий.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Microsoft полностью прекратит поддержку Office 2016 и Office 2019 14 октября 2025 года 4 ч.
Илон Маск задумал брать плату с новых пользователей X за право публиковать посты 8 ч.
В сериале Fallout засветился реальный телефонный номер — фанаты убеждены, что он скрывает секрет 8 ч.
«Выглядит как игра, о которой я всегда мечтал»: релизный трейлер No Rest for the Wicked взбудоражил геймеров перед стартом раннего доступа Steam 9 ч.
«Группа Астра» объявила о начале SPO 9 ч.
Гонконг разрешил запуск ETF в биткоинах и Ethereum 9 ч.
Adobe запустила Acrobat AI Assistant для анализа сложных документов — за $4,99 в месяц, но только на английском 10 ч.
Nintendo решила не участвовать в gamescom 2024 — выставка обойдётся без Switch 2 10 ч.
Бывший президент Blizzard предложил оставлять чаевые разработчикам «особенных» игр 12 ч.
Ретрофутуристическое приключение-долгострой Harold Halibut не оставило критиков равнодушными 13 ч.
Массовые увольнения в Tesla связаны с решением отложить на неопределённое время выпуск электромобиля за $25 000 47 мин.
Владельцы Tesla Cybertruck жалуются на залипающую педаль газа, компания замедляет выдачу пикапов клиентам из-за дефекта 3 ч.
Pimax представила передовую VR-гарнитуру Crystal Super с заменяемым оптическим модулем и более доступную модель Crystal Light 4 ч.
Новая статья: Обзор PCIe 4.0-накопителя Adata Legend 900: уж точно лучше, чем Samsung 990 Evo 8 ч.
Meta упростит интеграцию VR-гарнитур Quest в учебный процесс в школах и не только 9 ч.
Lamptron уличили в продаже фиктивных ключей для AIDA64 в комплекте со своими продуктами 9 ч.
Смартфоны Samsung Galaxy S24 обошли iPhone 15 по скорости передачи данных через 5G 9 ч.
Schneider Electric надеется заработать на буме ЦОД и инвестирует $140 млн в производство электрооборудования на территории США 9 ч.
Обновлённому коллайдеру — обновлённая сеть: Nokia и SURF «разогнали» до 800 Гбит/с имеющуюся оптическую сеть БАК 9 ч.
Sony действительно готовит PlayStation 5 Pro — The Verge подтвердил характеристики и раскрыл новые подробности 11 ч.