Сегодня 06 апреля 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Hardware

Энергопотребление ИИ удалось снизить на 95 % без потерь, но Nvidia новый алгоритм вряд ли одобрит

В условиях растущей популярности искусственного интеллекта высокое энергопотребление ИИ-моделей становится всё более актуальной проблемой. Несмотря на то, что такие техногиганты, как Nvidia, Microsoft и OpenAI, пока не говорят об этой проблеме громко, явно преуменьшая её значение, специалисты из BitEnergy AI разработали технологию, способную значительно снизить энергопотребление без существенных потерь в качестве и скорости работы ИИ.

 Источник изображения: Copilot

Источник изображения: Copilot

Согласно исследованию, новый метод может сократить использование энергии вплоть до 95 %. Команда называет своё открытие «Умножением линейной сложности» (Linear-Complexity Multiplication) или сокращённо L-Mul. Как пишет TechSpot, этот вычислительный процесс основан на сложении целых чисел и требует значительно меньше энергии и операций по сравнению с умножением чисел с плавающей запятой, которое широко применяется в задачах, связанных с ИИ.

На сегодняшний день числа с плавающей запятой активно используются в ИИ для обработки очень больших или очень малых чисел. Они напоминают запись в бинарной форме, что позволяет алгоритмам точно выполнять сложные вычисления. Однако такая точность требует крайне больших ресурсов и уже вызывает определённые опасения, так как некоторым ИИ-моделям нужны огромные объёмы электроэнергии. Например, для работы ChatGPT требуется столько электроэнергии, сколько потребляют 18 000 домохозяйств в США — 564 МВт·ч ежедневно. По оценкам аналитиков из Кембриджского центра альтернативных финансов, к 2027 году ИИ-индустрия может потреблять от 85 до 134 ТВт·ч ежегодно.

Алгоритм L-Mul решает эту проблему за счёт замены сложных операций умножения с плавающей запятой на более простые сложения целых чисел. В ходе тестирования ИИ-модели сохранили точность, при этом энергопотребление для операций с тензорами сократилось на 95 %, а для скалярных операций на 80 %.

L-Mul также улучшает и производительность. Оказалось, что алгоритм превосходит текущие стандарты вычислений с 8-битной точностью, обеспечивая более высокую точность с меньшим количеством операций на уровне битов. В ходе тестов, охватывающих различные задачи ИИ, включая обработку естественного языка и машинное зрение, снижение производительности составило всего 0,07 %, что специалисты сочли незначительной потерей на фоне огромной экономии энергии.

При этом модели на основе трансформеров, такие как GPT, могут получить наибольшую выгоду от использования L-Mul, поскольку алгоритм легко интегрируется во все ключевые компоненты этих систем. А тесты на популярных моделях ИИ, таких как Llama и Mistral, показали даже улучшение точности в некоторых задачах.

Плохая новость заключается в том, что L-Mul требует специализированного оборудования и современные ускорители для ИИ не оптимизированы для использования этого метода. Хорошая новость заключается в том, что уже ведутся работы по созданию такого оборудования и программных интерфейсов (API).

Одной из возможных преград может стать сопротивление со стороны крупных производителей чипов вроде Nvidia, которые могут замедлить внедрение новой технологии. Так как, например, Nvidia является лидером в производстве оборудования для искусственного интеллекта и маловероятно, что она так просто уступит позиции более энергоэффективным решениям.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Новая статья: Atomfall — чаепитие на обочине. Рецензия 7 ч.
Новая статья: Gamesblender № 720: анонсы презентации Switch 2, Ubisoft + Tencent, борьба за будущее StarCraft 7 ч.
Microsoft добавила Copilot память и персонализацию, разрешила сидеть в интернете вместо пользователя и научила рассуждать 15 ч.
Трамповские пошлины сорвали сделку по продаже американской части TikTok, несмотря на «огромный прогресс» 18 ч.
Единый реестр российского ПО вырос в 2024 году на четверть до 24,3 тыс. решений 20 ч.
Новая статья: Wreckfest 2 — праздник будет, но потом. Предварительный обзор 05-04 00:05
«Киберпротект» представил систему резервного копирования и восстановления данных для малого бизнеса 04-04 23:59
FromSoftware не бросит однопользовательские игры ради мультиплеерных, хоть сейчас и сосредоточена на Elden Ring Nightreign с The Duskbloods 04-04 23:21
Трамп отсрочил запрет TikTok в США ещё на 75 дней 04-04 22:49
Eidos Montreal нацелилась возродить Deus Ex — первые подробности новой игры серии 04-04 21:57
Большому марсианскому вертолёту придумали новую миссию — он поищет воду и жизнь в каньонах планеты 10 ч.
Zephyr представила компактную видеокарту GeForce RTX 4070 Sakura Snow X в корпусе, вырезанном ЧПУ-станком 12 ч.
Тарифы Трампа приведут к удорожанию производства чипов в США 17 ч.
Apple расширит производство iPhone в Бразилии, чтобы сэкономить на пошлинах 18 ч.
Смартфон Infinix Note 50s 5G+ получит встроенную ароматическую добавку 18 ч.
Марсоход NASA Perseverance стал свидетелем танца «пылевых дьяволов» на Марсе — они не поделили территорию 19 ч.
Samsung снова подала в суд на одного из крупнейших конкурентов — китайскую BOE 20 ч.
Европейский суперкомпьютер Discoverer получил обновление в виде NVIDIA DGX H200 20 ч.
Представлен первый в Китае высокопроизводительный процессор RISC-V для серверов — чип Lingyu 20 ч.
Власти Тайваня готовятся выделить $2,7 млрд на поддержку компаний, пострадавших от тарифной политики Трампа 23 ч.