Сегодня 19 июля 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → sambanova systems

DeepSeek разогнали до рекордной скорости всего на 16 чипах SambaNova — чипов Nvidia потребовалось бы в 20 раз больше

Стартап в области искусственного интеллекта SambaNova Systems, основанный в 2017 году выходцами из Sun, Oracle и Стэнфордского университета, объявил о создании самой быстрой в мире системы для развёртывания модели DeepSeek-R1 671B. Для оборудования Nvidia такие показатели недоступны.

 Источник изображения: sambanova.ai

Источник изображения: sambanova.ai

SambaNova добилась скорости работы DeepSeek-R1 в 198 токенов в секунду всего на 16 специально изготовленных ускорителях — аналогичного результата можно достичь, только развернув 40 стоек с 320 графическими процессорами Nvidia. «SambaNova на чипах SN40L RDU стала самой быстрой платформой для запуска DeepSeek. Это пятикратный прирост по сравнению со скоростью новейшего графического процессора на одной стойке, а к концу года мы предложим 100-кратную ёмкость для DeepSeek-R1», — пообещал соучредитель и генеральный директор SambaNova Родриго Лян (Rodrigo Liang).

Ресурсоёмкие рабочие нагрузки систем искусственного интеллекта традиционно обеспечиваются графическими процессорами Nvidia, но в SambaNova утверждают, что созданная компанией конфигурируемая архитектура потока данных представляет собой более эффективное решение. Её оборудование работает втрое быстрее и потребляет в пять раз меньше энергии, чем самые мощные из современных графических процессоров, сохраняя при этом полную вычислительную мощность модели DeepSeek-R1. Достижение подтвердили эксперты компании Artificial Analysis, которая проводит независимую оценку систем ИИ.

Открытая модель DeepSeek-R1 671B доступна в облаке SambaNova через API. Компания активно наращивает мощности и в ближайшем будущем надеется достичь общей пропускной способности в 20 000 токенов в секунду.


window-new
Soft
Hard
Тренды 🔥
Эра электромобилей откладывается: автопроизводители массово отменяют и замораживают EV-проекты 3 ч.
Складной Samsung Galaxy Z Fold7 оказался дорогим в ремонте — замена экранов обойдётся в 61 % стоимости нового смартфона 3 ч.
В США испытали двигатель ракеты для первого старта с другой планеты 4 ч.
Rockchip анонсировала ИИ-ускоритель RK182X с архитектурой RISC-V 5 ч.
Rockchip представила 10-ядерный Arm-процессор RK3668 с ИИ-модулем 5 ч.
Samsung похвалилась ажиотажным спросом на новые складные смартфоны — 210 000 заказов за двое суток только в Индии 5 ч.
Астрономы обнаружили странное тело в Солнечной системе, которое движется в резонансе с Нептуном 5 ч.
Падение спроса заставило Tesla предложить американским клиентам широчайший набор бонусов при покупке электромобиля 10 ч.
Трамп поддержал криптоиндустрию: подписан закон GENIUS Act о стейблкоинах 11 ч.
Углеродные выбросы Amazon выросли в 2024 году на 6 % из-за ИИ ЦОД и любителей шопинга 18 ч.