Сегодня 15 июля 2024
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Microsoft представила малую языковую модель Phi-3-Silica для компьютеров Copilot Plus PC

Вслед за презентацией компактной ИИ-модели Phi-3-vision, компания Microsoft представила на ежегодной конференции Microsoft Build 2024 ещё одну малую языковую модель (SLM) Phi-3-Silica, которая будет использоваться на компьютерах класса Copilot Plus PC. Эти ПК оснащены чипами со встроенным нейронным сопроцессором (NPU), обеспечивающим локальную работу функций на основе ИИ.

 Источник изображения: Pixabay

Источник изображения: Pixabay

Это самая маленькая из всех моделей семейства Phi-3, обладающая 3,3 млрд параметров. Семейство Phi-3 также включает модель Phi-3-mini с 3,8 млрд параметров, Phi-3-vision (4,2 млрд параметров), Phi-3-small (7 млрд параметров) и Phi-3-medium (14 млрд параметров).

Как ожидается, первые ноутбуки под брендом Copilot Plus PC со встроенной Phi-3-Silica поступят в продажу в июне этого года. По данным Microsoft, показатель Time to first token (TTFT) у Phi-3-Silica составляет 650 токенов в секунду, а при работе модель потребляет около 1,5 Вт, освобождая мощности процессора и графического ускорителя ПК для обработки других вычислений. При генерации токенов модель повторно использует кеш-память KV NPU, сама генерация осуществляется на ЦП со скоростью примерно 27 токенов в секунду.

«Модели Phi-3 значительно превосходят языковые модели того же и большего размера по ключевым показателям. Phi-3-mini работает лучше, чем модели вдвое большего размера, а Phi-3-small и Phi-3-medium превосходят гораздо более крупные модели, включая GPT-3.5T», — отметила Microsoft.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Вечерний 3DNews
Каждый будний вечер мы рассылаем сводку новостей без белиберды и рекламы. Две минуты на чтение — и вы в курсе главных событий.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
IDC: по итогам 2024 года смартфоны с поддержкой ИИ займут 19 % рынка 51 мин.
Новая статья: Обзор Ryzen 5 8500G: разноядерный шестиядерник на замену Ryzen 5 5600G 8 ч.
Huawei открыла исследовательский центр в Шанхае — в нём будут работать 35 тыс. учёных и инженеров 14 ч.
Сразу несколько стартапов готовятся поднимать туристов к границе земной атмосферы на воздушных шарах 24 ч.
Google провела кадровые перестановки для возрождения AR-устройств, но уже на основе ИИ 14-07 07:28
Тайваньские производители в июне хорошо заработали на буме ИИ 14-07 07:05
BlackRock: ИИ — это новая промышленная революция, которая подстегнёт быстрое развитие ЦОД 13-07 22:42
Американские производители оборудования для выпуска чипов нарастили поставки в Китай, несмотря на санкции 13-07 19:37
Asus представила третью версию GeForce RTX 4060 Dual с уменьшенными вентиляторами 13-07 18:31
Российские разработчики показали прототип игровой консоли на базе ОС «Аврора» 13-07 16:52