Сегодня 27 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → embeddinggemma

Google выпустила EmbeddingGemma 2 — открытую модель для поиска по текстам, коду, изображениям, аудио и видео прямо на смартфоне

Google представила лёгкую и быструю открытую модель искусственного интеллекта EmbeddingGemma 2 — открытую модель для поиска по текстам, коду, изображениям, аудио и видео прямо на устройстве. На практике она позволяет искать в коллекции медиафайлов объекты или события по их текстовому описанию без отправки каких-либо данных в облако.

 Источник изображения: blog.google

Источник изображения: blog.google

Модель превращает разные виды данных в единый формат — числовые векторы из 768 значений, отражающие содержание. В результате текстовый запрос можно соотнести с изображением или звуком, даже если у файла нет подходящего названия и описания. То есть вместо совпадения слов система сопоставляет близость содержимого по смыслу.

Главное отличие EmbeddingGemma 2 от первой версии — выход за пределы текста. Новая модель обрабатывает изображения и звук напрямую: собирать комбайн из распознавания речи, генерации подписей к картинкам и отдельной модели для текстового поиска больше не требуется. А для видео можно проиндексировать кадры вместе с фрагментами аудио и находить конкретные моменты.

Модель EmbeddingGemma 2 построена на архитектуре открытой Gemma 4 и распространяется по допускающей коммерческое использование модели Apache 2.0. При размере 740 млн параметров она с лёгкостью запускается локально на современных потребительских устройствах.

В профильных тестах MTEB (Massive Text Embedding Benchmark) для кода и MAEB (Massive Audio Embedding Benchmark), утверждает разработчик, она продемонстрировала лучшие результаты для моделей размером до 1 млрд параметров. EmbeddingGemma 2 не уступает, а то и превосходит гораздо более крупные модели в задачах работы с текстом, изображениями и звуком.

Одной из отличительных особенностей модели является её модульная архитектура: для задач, связанных только с текстом, ей требуются всего 270 млн параметров; для мультимодальных функций и обработки изображений потребуется подключить кодировщики размером ещё 170 млн параметров; для аудио — ещё 300 млн параметров. За счёт технологии Matryoshka Representation Learning (MRL) разработчики могут динамически сокращать размерность выходных векторов с 768 до 512, 256 или 128 элементов — можно на величину до шести раз сократить занимаемый векторными базами данных объём памяти.

EmbeddingGemma 2 эффективно работает даже в условиях жёстких ограничений ресурсов. В тестах на Pixel 11 Pro квантование помогло модели занять всего 191 Мбайт оперативной памяти для весов, отвечающих только за текст; в мультимодальном варианте — около 567 Мбайт. По сравнению с моделью первого поколения новая сохранила высокую эффективность в работе с многоязычным текстом; в бенчмарке MTEB Code она повысила результат с 68,76 до 78,68 балла. Это значит, что она хорошо подходит для задач индексирования кодовой базы и задач поиска информации для пишущих код ИИ-агентов. Локальная работа на устройствах обеспечивает пользователям конфиденциальность данных.

В сочетании со «старшей» Gemma 4 служебная EmbeddingGemma 2 позволяет реализовать на устройстве конвейеры RAG (Retrieval-Augmented Generation) — учитывая, что у обеих моделей один токенизатор и аудиокодировщик, они могут работать в единой среде с меньшим суммарным потреблением памяти. Веса моделей доступны на платформах Hugging Face и Kaggle; вскоре они появятся на Gemini Enterprise Agent Platform. EmbeddingGemma 2 запускается и встраивается при помощи стандартных средств, включая transformers, llama.cpp, Ollama, LM Studio и другие.


window-new
Soft
Hard
Тренды 🔥
ИИ-модель Alibaba Qwen уличили в попытке отправить данные на китайский сервер, хотя её об этом не просили 9 мин.
Apple iTunes неожиданно ожил: Тейлор Свифт и Ариана Гранде нашли новый способ продвигать музыку 21 мин.
ИИ-бум обогатил лишь семерых: остальные 493 компании S&P 500 пока не видят отдачи от инвестиций 30 мин.
Вредоносный ИИ-агент Skynet захватывает других агентов и заставляет жертв оплачивать свою работу 34 мин.
Вдохновлённый Diablo и Stardew Valley ролевой боевик Emberville не выйдет сегодня в раннем доступе Steam и GOG — объявлена новая дата релиза 3 ч.
Слухи: ремейк легендарного хоррора Silent Hill взял курс на релиз в 2027 году 4 ч.
OpenAI представила GPT-6.1 Terra — быструю модель для самостоятельной работы на компьютере 12 ч.
Энтузиаст разработал инструмент для запуска на iPhone, iPad и Mac игр с Nintendo Switch, включая главные эксклюзивы 13 ч.
Шейдеры будут скомпилированы ещё до скачивания игры: Unreal Engine 5.8 получил поддержку Microsoft ASD 13 ч.
В Windows 11 нашли секретный переключатель для будущих процессоров Intel — он активирует ускорение системы 14 ч.
Представлена наиболее точная модель ранней Вселенной — это работа 100 000 ядер и 15 000 GPU суперкомпьютера Frontier 15 мин.
Samsung прокачала 8-нм техпроцесс — 8LPU+ даст +12 % к скорости чипов и -15 % к потреблению 2 ч.
ИИ оставил без печатных плат даже производителей ПК — сроки поставок растянулись до 30 месяцев 2 ч.
Nvidia захватила 61 % рынка ИИ-чипов для человекоподобных роботов — но конкуренты уже наступают 3 ч.
В Германии появится суперкомпьютер на базе NVIDIA GB200 Grace Blackwell для моделирования климата 3 ч.
Huawei представила маршрутизаторы Router X2 и Router X2 Pro, замаскированные под книги 3 ч.
ИИ-пузырь в Китае лопнул? Акции производителей чипов и роботов потеряли до половины стоимости 3 ч.
Суперкомпьютеры «Яндекса» не пострадали от атак беспилотников и заработают на других площадках 12 ч.
Apple признала проблему трескающегося экрана у «небольшого числа» iPhone Duo и предлагает замену — но причину не объясняет 12 ч.
Новая статья: Компьютер месяца, спецвыпуск: выбираем материнскую плату для игрового ПК 12 ч.