Разработчики игр всё чаще обращаются к нейросетям для решения проблемы нехватки видеопамяти. Поскольку для достижения ультрареалистичного игрового опыта размеры текстур постоянно увеличиваются, это создаёт повышенную нагрузку на VRAM. Один из энтузиастов опубликовал видео, в котором продемонстрировал работу технологии нейросетевого сжатия текстур (Neural Texture Compression, NTC) на видеокартах Nvidia и Intel. Тесты показали, что NTC позволяет значительно снизить объём используемой видеопамяти без потери качества изображения.

Источник изображений: Compusemble / YouTube

Технология NTC разработана как альтернатива традиционному блочному сжатию текстур. В отличие от существующих методов, она использует небольшие специализированные нейросети с минимальной вычислительной нагрузкой, которые настраиваются под конкретные материалы сцены. Это позволяет уменьшить объём текстур как в оперативной памяти (RAM), так и на накопителе, одновременно повышая качество рендеринга.

Например, в демонстрационном ролике исходный объём текстуры шлема составлял 272 Мбайт. После блочного сжатия он сократился до 98 Мбайт. Применение NTC позволило уменьшить его до 11,37 Мбайт без потери качества — это более чем в 24 раза меньше по сравнению с оригиналом. Аналогичные результаты были продемонстрированы на видеокарте Intel с моделью тираннозавра: после декодирования текстуры с помощью NTC они выглядели чётче и ближе к оригиналу, чем при стандартном сжатии.

Автор видео Compusemble протестировал технологию на системе с видеокартой Nvidia GeForce RTX 5090. По его данным, время обработки одного кадра в разрешении 4K увеличилось с 0,045 мс до 0,111 мс — в 2,5 раза, однако это по-прежнему незначительно по сравнению с общей длительностью рендеринга кадра. При этом, если отключить функцию Cooperative Vectors, разработанную Nvidia, Microsoft и другими участниками индустрии, время обработки возрастает до 5,7 мс, что делает применение NTC практически невозможным без аппаратного ускорения.

Следует отметить, что технология NTC пока не используется в коммерческих проектах. Однако её техническая база уже формируется. NTC позволит разработчикам либо снизить нагрузку на видеопамять, либо повысить детализацию графики без увеличения требований к «железу». Ожидается, что первые игры с поддержкой NTC появятся в течение ближайших нескольких лет.

Microsoft внесла изменения в программный код Chromium, улучшающие рендеринг текста на компьютерах с Windows. Таким образом, обозреватель Chrome версии 124 получит поддержку настроек контрастности и гаммы из Windows ClearType Text Tuner для рендеринга текста. Эти улучшения аналогичны тем, что Microsoft ранее внесла в свой веб-обозреватель Edge для рендеринга шрифтов и текста

Технология шрифтов Microsoft ClearType много лет используется в Windows для улучшения восприятия текстовых данных на экранах, чтобы текст выглядел так, как будто он напечатан на листе бумаги. Инженеры Microsoft интегрировали поддержку ClearType Text Tuner в Chromium, и теперь построенный на его базе обозреватель от Google сможет использовать преимущества этой технологии, как и большинство других приложений Windows. Ранее Chrome для рендеринга текста использовал технологию Skia с жёстко запрограммированными значениями контрастности и гаммы.

Возглавил процесс улучшения рендеринга текста в обозревателях на базе Chromium старший инженер по разработке программного обеспечения Microsoft Курт Катти-Шмидт (Kurt Catti-Schmidt). В последние месяцы Кэтти-Шмидт уделяет большое внимание улучшениям специальных возможностей как для Edge, так и для Chrome.

Эти изменения являются частью стремления Microsoft улучшить обозреватели на базе Chromium для Windows после того, как компания перешла на Chromium в своём собственном обозревателе Edge более пяти лет назад. В то время Microsoft заявила, что «предложит опыт работы с платформой Windows, чтобы улучшить работу всех браузеров на базе Chromium в Windows», и теперь выполняет своё обещание. Microsoft улучшила прокрутку в Chromium, добавила поддержку сенсорного управления и внесла много других полезных инноваций.

Ранняя версия новой технологии Work Graphs, представленной компанией Microsoft на прошлой неделе и входящей в состав DirectX 12, обеспечила значительную прибавку игровой производительности в системе с видеокартой Radeon RX 7900 XTX, сообщила компания AMD. Технология Work Graphs призвана оптимизировать взаимодействие CPU и GPU при выполнении различных задач.

Источник изображений: AMD

По словам AMD, в ранних испытаниях Work Graphs повысила игровую производительность ПК с видеокартой Radeon RX 7900 XTX на 39 %. Без технологии Work Graphs и при использовании традиционного метода выполнения операций ExecuteIndirect решение задачи потребовало на 64 % больше времени. Проверка проводилась на ПК с Ryzen 7 5800X, 32 Гбайт памяти DDR4 и видеокартой Radeon RX 7900 XTX.

Технология Work Graphs призвана разгрузить центральный процессор за счёт переноса планирования части задач на видеокарту. Иногда CPU не успевает подготовить задачи для расчёта на GPU, в результате видеокарта простаивает, ожидая новых указаний. Задача Work Graphs — сделать GPU более автономным. Для этого CPU будет создавать для GPU последовательность задач, которую необходимо исполнить. Такая оптимизация позволит увеличить производительность рендеринга.

Ниже на видео показана 3D-сцена без пользовательского интерфейса HUD и скайбокса, рендеринг которой осуществляется за одну последовательность задач с помощью Work Graphs.

Технологии Work Graphs и Mesh Nodes станут важными составляющими DirectX 12. Все ключевые производители видеокарт уже работают над их поддержкой на уровне драйверов для своих аппаратных средств.

Благодаря возможности графических процессоров самостоятельно планировать работу с помощью Work Graphs, между CPU и GPU будут передаваться меньше задач, что в конечном итоге освободит ресурсы центрального процессора и памяти, позволив разработчикам игр более эффективно использовать ресурсы GPU для создания ещё более впечатляющей картинки.