Главный архитектор игровых приставок PlayStation 5 и PlayStation 5 Pro Марк Черни (Mark Cerny) в интервью игровому изданию EuroGamer заявил, что в будущем фирменная технология масштабирования PSSR (PlayStation Super Resolution) для PS5 Pro будет похожа на технологию масштабирования AMD FSR 4 для ПК.

Источник изображения: VideoCardz

На прошлой неделе компания AMD сообщила, что разработанная с использованием машинного обучения технология масштабирования FSR 4 создавалась при активной помощи со стороны компании Sony. В частности, при создании FSR 4 компания AMD применяла ИИ-модели, разработанные совместно с Sony Interactive Entertainment. Обе компании в прошлом году представили совместную разработку под кодовым названием «Аметист». Цель проекта — улучшение игрового процесса и графики с помощью искусственного интеллекта. Наработки проекта «Аметист» легли в основу FSR 4. В том же году Sony представила PlayStation 5 Pro. В основе приставки используется гибридная архитектура AMD RDNA: вычислительный блок процессора PS5 Pro собран на архитектуре RDNA 2, для трассировки лучей используется RDNA 4, а для возможностей машинного обучения применяется некая кастомная архитектура RDNA.

О последнем компоненте пока известно не так много. Однако в будущем он будет использоваться для технологии масштабирования, аналогичной FSR 4 на PS5 Pro. По словам Марка Черни, эта технология масштабирования не будет полностью идентична FSR 4 для ПК — она будет адаптирована под определённые сценарии.

«Наша цель состоит в том, чтобы создать что-то, похожее на апскейлер FSR 4 для PS5 Pro в играх, которые выйдут в 2026 году. Это будет следующая ступень эволюции PSSR. По сути, технология должна принимать те же входные данные и выдавать аналогичные выходные данные, что и FSR 4. Реализация этой идеи довольно амбициозна и требует много времени, поэтому мы пока не демонстрировали эту технологию», — заявил Черни.

Он добавил, что «FSR4-подобную» технологию масштабирования необходимо будет адаптировать для работы на консоли, например, под определённую частоту кадров, что не так критично для ПК. По словам Черни, использование специализированного аппаратного ускорения ИИ в PS5 Pro обеспечит вычислительную мощность 300 8-битных TOPS без учёта разреженности. По его мнению, этого достаточно для нового алгоритма масштабирования. Сопоставимый уровень производительности демонстрируют видеокарты на архитектуре RDNA 4 (серия Radeon RX 9070).

«FSR 4 и следующая эволюция PSSR станут основой для нашего будущего. Мы ожидаем, что со временем у AMD и Sony появятся собственные реализации каждого из алгоритмов, разработанных в ходе нашего сотрудничества. Они могут немного отличаться друг от друга, поскольку технические требования к разработке игр для консолей и ПК в целом различаются. Например, как я уже упоминал в техническом видео о PS5 Pro в декабре, стабильные 60 кадров в секунду критически важны в мире консолей, тогда как в ПК-среде к этому относятся менее строго», — рассказал Черни.

Черни также отметил, что в настоящее время компания сосредоточена не столько на интеграции технологии, аналогичной FSR 4, в PS5 Pro, сколько на расширении поддержки PSSR, чтобы её использовало как можно больше игр.

В прошлом году Sony представила проект «Аметист» — совместную работу области ИИ, в рамках которой Sony PlayStation и AMD объединили ресурсы для улучшения игрового процесса и графики с использованием искусственного интеллекта. Сейчас AMD подтвердила, что в составе её технологии масштабирования FSR 4, использующей машинное обучение, применяются ИИ-модели, разработанные совместно с Sony Interactive Entertainment. Иными словами, FSR 4 является результатом коллаборации PlayStation и AMD.

Источник изображения: Overclock3d

«Мы рады сотрудничать с PlayStation над проектом «Аметист»! FSR 4 выглядит фантастически! Очень рады совместной разработке с Sony Interactive Entertainment моделей, используемых для масштабирования FSR 4. Это лишь начало. Следите за новостями!» — сообщила AMD Radeon на своей странице в соцсети X.

Из этого заявления можно сделать вывод, что PlayStation и AMD продолжат сотрудничество над созданием более передовых ИИ-инструментов и технологий. Разработка FSR 4 оказалась для компании большим успехом, что подтверждается первыми обзорами видеокарт серии Radeon RX 9070, эксклюзивно поддерживающих данную технологию.

Если взглянуть на список игр с поддержкой FSR 4, то можно отметить в нём присутствие практических всех игр Sony PlayStation, портированных на ПК. Сюда входят такие игры, как The Last of Us Part I, God of War: Ragnarok, Horizon Zero Dawn и Horizon Forbidden West, Ratchet and Clank Rift Apart и другие. И всё это благодаря тому, что Sony при переносе этих игр на ПК наделила их поддержкой технологии FSR 3.1, а также API, которые позволяют быстро реализовать поддержку новой версии апскейлера FSR 4.

Пока непонятно, как разработка FSR 4 может повлиять на платформу PlayStation в будущем. У Sony есть собственный апскейлер PSSR (PlayStation Spectral Super Resolution) для игровой консоли PlayStation 5 Pro. Возможно в рамках дальнейшего сотрудничества с AMD компания сможет улучшить PSSR, что в свою очередь приведёт к повышению качества изображения будущих игр для PS5 Pro. Также возможно, что PSSR и FSR 4 со временем станут более похожими.

AMD представила технологию ИИ-масштабирования изображения FSR 4 для повышения не только частоты кадров в играх, но и качества изображения. В новой версии разработчики сосредоточились на повышении качества изображения. Технология основана на алгоритмах искусственного интеллекта, обученного на процессорах AMD EPYC и ускорителях Instinct — она оптимизирована для архитектуры RDNA 4 и на момент запуска будет доступна только на видеокартах нового поколения.

Источник изображений: AMD

На пресс-конференции перед презентацией AMD продемонстрировала работу FSR 4, сравнив её с FSR 3.1 и нативной отрисовкой в разрешении 4K на примере Warhammer 40,000: Space Marine 2. Как показала практика, картинка, полученная при помощи AMD FSR 4, отличается более высоким качеством не только в сравнении с предшественницей, но и относительно нативного рендеринга — это заметно на примере шпилей на башне. Игровое изображение оказывается более чётким как в статике, так и в движении: оно становится более детализированным, а количество артефактов, присущих FSR 3.1, снижается.

AMD FSR 4 обещает прирост производительности в играх с функциями Super Resolution и Frame Generation. Замеры по нескольким играм показали, что прирост производительности (число кадров в секунду) в режиме Performance с обеими запущенными функциями колеблется от 2,1- до 3,7-кратного. AMD FSR 4 с одной только Super Resolution, в зависимости от игры, обеспечила от 1,4- до 2-кратного прироста производительности. Во всех случаях игры запускались в разрешении 4K на видеокарте AMD Radeon RX 9070 XT.

На момент запуска FSR 4 будет поддерживаться более чем в 30 играх для ПК, что стало возможным благодаря инструментам AMD Upgradable FSR API, представленным с FSR 3.1. До конца года поддержку FSR 4 получат 75 игр. Отмечается, что с первого дня технология будет совместима с большинством игр, недавно портированных на ПК с Sony PlayStation.

AMD также упомянула технологию HYPR-RX, которая повышает разрешение и качество картинки на уровне драйвера и включается одним щелчком мыши. В отдельных случаях она оказывается полезной, поскольку одновременно активирует такие функции, как FSR/RSR (повышение разрешения), Anti-Lag (сокращение задержки), Radeon Boost (повышение производительности и визуального качества игр) и AFMF 2 (генерация кадров). К слову, компания выпустила обновлённую версию AFMF 2.1 с улучшенным алгоритмом, снижением ореолов, повышенной детализацией, а также более качественным обнаружением и обработкой наложений.

Компания Intel отчиталась, что её фирменная технология масштабирования изображения XeSS для повышения частоты кадров в играх теперь поддерживается более чем 150 играми.

Источник изображения: Intel

Intel стала первой компанией, выпустившей новое поколение игровых видеокарт. Её графический ускоритель Arc B580 с рекомендованной стоимостью $250 быстро завоевал популярность среди игроков за свою доступную цену, наличие 12 Гбайт памяти и отличную производительность в играх в разрешении FHD. Позже компания выпустила младшую модель Arc B570. Intel продолжает оптимизировать драйверы и программное обеспечение Arc, а также работает над расширением поддержки фирменной технологии масштабирования изображения XeSS.

В декабре компания анонсировала XeSS 2, в составе которой появились технологии генерации кадров и снижения задержки. Экосистема игр с поддержкой XeSS продолжает расширяться. Недавно Intel сообщила, что поддержку XeSS уже получили более 150 различных игр. Производитель не уточнил, сколько именно из них поддерживает XeSS 2.

С полным списком игр, поддерживающих технологию масштабирования Intel XeSS, можно ознакомиться по этой ссылке. В настоящий момент в списке значатся 159 игровых тайтлов.

Способность графических процессоров хорошо масштабировать производительность в вычислениях в условиях замедления классического «закона Мура» долгое время представлялась руководством Nvidia в качестве спасительного круга для всего человечества. Когда бурный рост систем искусственного интеллекта стал замедляться, на горизонте замаячили новые проблемы с масштабированием производительности.

Источник изображения: Nvidia

Как отмечается в публикации Financial Times, для многих в Кремниевой долине «закон Мура» был вытеснен новой концепцией: «законом масштабирования» искусственного интеллекта. До недавних пор считалось, что масштабирование вычислительной инфраструктуры и насыщение её бόльшими объёмами данных приводит к качественным изменениям в системах искусственного интеллекта. По сути, ожидалось, что за счёт этого ИИ будет становиться «умнее». Все крупные компании технологического сектора в итоге уже несколько кварталов подряд сосредоточены на активном наращивании вычислительной мощности своих центров обработки данных.

Ранее считалось, что существующие темпы роста производительности центров обработки данных будут сохраняться до тех пор, пока не будет создан «сверхинтеллект», способный превзойти человеческий, но при этом базирующийся на программных алгоритмах и зависимостях. Лишь в последние недели эксперты начали проявлять озабоченность тем, что новейшие большие языковые модели в исполнении OpenAI, Google и Anthropic не дают необходимого прогресса в соответствии с прежними тенденциями.

Покинувший OpenAI один из основателей стартапа Илья Суцкевер недавно заявил: «2010-е годы были эпохой масштабирования, но теперь мы вернулись в эпоху открытий и изумления». Примечательно, но Суцкевер ещё год назад был уверен, что всю поверхность Земли нужно будет покрыть солнечными панелями, которые будут питать столь же многочисленные центры обработки данных.

Многие участники рынка сходятся во мнении, что этап активного обучения языковых моделей подходит к концу, но для поддержания существующих темпов прогресса нужно заниматься следующим этапом. Глава Microsoft Сатья Наделла (Satya Nadella) считает, что замедление обучения больших языковых моделей не особо ограничивает темпы прогресса, поскольку системы искусственного интеллекта обретают возможность рассуждать. По мнению основателя Nvidia Дженсена Хуанга (Jensen Huang), даже снижение потребности в вычислительных ресурсах для обучения языковых моделей не будет означать снижения спроса на её продукцию. Разработчики систем ИИ будут стремиться сократить время реакции системы на задаваемые пользователями вопросы. Данная гонка потребует ещё большего количества аппаратных ресурсов, по мнению бессменного руководителя Nvidia, и это хорошо для бизнеса компании. Президент Microsoft Брэд Смит (Brad Smith) убеждён, что потребности рынка в чипах для ускорителей будут расти ещё как минимум на протяжении года.

Впрочем, переход систем ИИ на новый этап развития должен обеспечиваться появлением реальных сфер применения, которые полезны для бизнеса. С этим пока возникают проблемы, ведь любые инновации должны приносить материальную выгоду, а эффект от применения ИИ в его нынешнем виде во многих отраслях экономики пока не столь очевиден. Это не мешает технологическим гигантам вкладывать огромные суммы в расширение своих вычислительных ресурсов. В этом году совокупные капитальные затраты Microsoft, Amazon, Google и Meta✴ должны превысить $200 млрд, а в следующем они наверняка превзойдут $300 млрд, как считают представители Morgan Stanley.

Старший вице-президент и генеральный менеджер группы вычислительных и графических решений AMD Джек Гуинь (Jack Huynh) сообщил порталу Tom’s Hardware, что компания AMD уже ведёт разработку технологии масштабирования изображения FidelityFX Super Resolution 4.0. Она будет отличаться от актуальной версии FSR 3.0.

В масштабном интервью на выставке электроники IFA 2024, проходившей в Берлине, Tom’s Hardware расспросил топ-менеджера AMD о планах компании на ближайшее будущее. Из этого разговора, например, стало известно, что AMD хочет объединить RDNA для игр и CDNA для ИИ-ускорителей в единую графическую архитектуру UDNA, сместить акцент с ограниченного сегмента флагманских видеокарт для энтузиастов и увеличить своё присутствие в массовом сегменте GPU, а также выпустить процессоры Kraken для ноутбуков Copilot+ PC стоимостью до $799.

Ещё одной темой обсуждения стала новая технология масштабирования FidelityFX Super Resolution 4.0, которую Гуинь затронул при разговоре о портативных приставках. По его словам, AMD занимается разработкой FSR 4.0 уже около года. Новая технология будет полностью полагаться на ИИ-алгоритмы, а одно из её ключевых преимуществ связано с повышением энергоэффективности GPU, которые используются в портативных игровых приставках.

«Что касается портативных устройств, то мой главный приоритет — это время работы от батареи. Если посмотреть на Asus ROG Ally или Lenovo Legion Go, то там практически нет времени работы от батареи. Мне нужно несколько часов. Мне нужна возможность играть в Wukong три часа, а не 60 минут. Вот где вступают в дело генерация кадров и интерполяция, поэтому мы и работаем над FSR 4. Технологии FSR2 и FSR3 основаны на аналитической генерации. Они были основаны на фильтрах. Мы сделали так, потому что хотели быстро выйти на рынок с этим решением. Однако потом я сказал команде: “Ребята, это не то, куда движется будущее”. Поэтому мы полностью изменили подход около 9–12 месяцев назад, чтобы перейти на ИИ», — заявил Гуинь.

«Теперь мы переходим на генерацию кадров на основе ИИ, интерполяцию кадров. Идея заключается в повышении эффективности для максимального увеличения времени автономной работы от батареи. И уже тогда мы могли бы зафиксировать количество кадров в секунду, может быть, на уровне 30 или 35. Моя главная цель сейчас — максимально увеличить время работы от батареи. Я думаю, что это самая большая жалоба [потребителей]», — добавил Гуинь.

В своём комментарии представитель AMD ничего не сказал об использовании FSR 4.0 с другими устройствами, например ноутбуками. Будет ли новая технология масштабирования в этом случае полагаться на ИИ-ускорители (NPU) в составе тех же процессоров Strix Point? Ответа на этот вопрос пока нет.

AMD пока не готова говорить о том, когда новая технология масштабирования будет официально представлена. Если FSR 4.0 уже находится в разработке 9–12 месяцев, то она вполне может быть почти готова к выпуску. Однако, как показывают примеры прошлых решений по масштабированию, включая DLSS и XeS наряду с FSR 1/2/3, выпуск API — это лишь первый шаг. Реализация поддержки игр для нового API занимает гораздо больше времени.

Arm представила собственную технологию масштабирования, основанную на AMD FSR2 — новое решение получило название Arm Accuracy Super Resolution (Arm ASR). И если FSR2 предназначается для ПК и мощных консолей, то реализация технологии временно́го масштабирования Arm ориентирована на мобильные устройства со скромными показателями производительности. Arm также опубликовала исходный код своего решения, чтобы избавить разработчиков от затрат на лицензирование.

Источник изображений: Arm

Чипы Arm традиционно используются в смартфонах и планшетах — у них небольшие экраны с более низкими разрешениями, поэтому в масштабировании они не нуждаются. Но в последнее время границы применения этих процессоров расширились — они перекочевали в десктопы и ноутбуки; тем временем AAA-игры, которые ранее были прерогативой игровых ПК и консолей, теперь выходят и на мобильных устройствах.

Оптимизированная для мобильных устройств Arm ASR работает эффективнее, чем AMD FSR2. Arm провела тестирование на графической подсистеме Immortalis-G720 при разрешении 2800 × 1260 пикселей и установила, что ASR обеспечивает 53-процентный прирост частоты кадров при двухкратном масштабировании по сравнению с 36 % у FSR2. Компания также протестировала свою технологию с чипом MediaTek Dimensity 9300 — двухкратное масштабирование обеспечило сокращение энергопотребления на 20 % по сравнению с прорисовкой той же сцены в исходном разрешении 1080p. Это значит, что у геймеров будет больше времени на мобильные игры, а пропуск тактов при перегреве процессора будет возникать реже.

Это уже не первое подобное решение для мобильных устройств — в прошлом году Qualcomm представила собственную технологию Snapdragon Game Super Resolution. Но в решении Qualcomm используется пространственное масштабирование — его приоритетом является производительность, а не качество; а в Arm ASR применяется временно́е и интеграция с игровым движком для повышения качества картинки. Arm ASR также может оказаться полезной для Microsoft Copilot+ PC, в которых используются Arm-процессоры. Собственная технология масштабирования Automatic Super Resolution (Auto SR) есть и у Microsoft — она не обеспечивает того же качества, что технология Arm, но работает на базе ИИ-ускорителя (NPU), а значит, сфера её применения пока ограничена теми же Copilot+ PC.

Важное преимущество Arm ASR состоит в том, что она уже знакома многим разработчикам, поскольку основана на AMD FSR2 — имеющие опыт программисты быстро разберутся с API Arm ASR и параметрами конфигурации. А лицензия с открытым исходным кодом упростит внедрение технологии для кроссплатформенных игр.

Microsoft официально представила Automatic Super Resolution (Auto SR или ASR) — технологию масштабирования изображения на уровне операционной системы, призванную работать независимо от интеграции в игры. В то же время компания опубликовала список игр, в которых технология Auto SR заработает автоматически, а также те игры, где потребуется её ручное включение.

Источник изображений: Microsoft

Automatic Super Resolution в большей степени похожа на апскейлеры Nvidia Image Scaling (NIS) и AMD Radeon Super Resolution (RSR), за исключением того, что она не привязана к какому-то определённому производителю видеокарт и работает на уровне ОС. Уровень сложности интеграции Auto SR (разработчикам игр это делать не нужно) аналогичен этим двум технологиям.

Функция масштабирования изображения на уровне операционной системы или драйвера является отличной альтернативой интеграции фирменных технологий масштабирования. Кроме того, в отличие от фирменных технологий апскелинга, Auto SR работает с масштабированием целых кадров изображения, включая пользовательский интерфейс.

Microsoft упростила процесс внедрения разных технологий масштабирования в игры, выпустив для этого универсальный API DirectSR. Однако он требует поддержки со стороны разработчиков игр. Они должны подготовить свои игровые движки для предоставления тому или иному апскейлеру необходимых переменных (векторы движения, глубина цвета и т. д.), в противном случае DirectSR работать не будет. Auto SR в свою очередь может оказаться хорошей альтернативой для игр, которые никогда не получат поддержку DirectSR. В частности, речь идёт о старых и классических играх.

Ключевая задача Auto SR — повысить игровую производительность. Однако финальное качество масштабируемого изображения будет, конечно, ниже, чем у фирменных технологий апскейлинга. Однако Auto SR не требует интеграции на уровне того же драйвера. Кроме того, в отличие от Nvidia Image Scaling (NIS) и AMD Radeon Super Resolution (RSR), в которых применяются методы пространственного масштабирования, технология Auto SR использует ИИ-алгоритмы для компенсации потери качества.

Microsoft объясняет, что Auto SR использует специальную модель искусственного интеллекта, обученную на игровом контенте. Для работы ей не нужны ядра GPU и CPU. Вместо них технология полагается на аппаратный ИИ-движок Neural Processing Unit (NPU), который разгружает задачи по масштабированию с видеокарты и центрального процессора. Без NPU Auto SR работать не будет.

Auto SR предназначена для уже выпущенных игр, с частью которых она будет применяться автоматически (с их списком можно ознакомиться ниже). В свою очередь DirectSR предназначен для новых игр, в которые необходимо интегрировать указанный API. Таким образом, хотя оба решения и направлены на обеспечение масштабирования и повышения производительности, они предлагают разные уровни качества и не предназначены для конкуренции друг с другом. Auto SR будет работать автоматически со следующими играми: BeamNG.drive, Borderlands 3, Control (DX11), Dark Souls III, God of War, Kingdom Come: Deliverance, Resident Evil 2, Resident Evil 3, Sekiro: Shadows Die Twice, Sniper Ghost Warrior Contracts 2 и The Witcher 3.

В настоящий момент Auto SR поддерживается только компьютерами Copilot Plus PC. Иными словами, она будет работать только на системах с процессорами Qualcomm Snapdragon X. Вероятно, позже поддержка технологии появится на ноутбуках с процессорами AMD Ryzen AI 300 и Intel Core Ultra 200V (Lunar Lake). Microsoft таже хочет в будущем добавить для Auto SR поддержку HDR и систем с несколькими мониторами.

Microsoft сообщила о доступности предварительной версии Agility Software Development Kit 1.714.0 для разработчиков, в который включена поддержка API DirectSR. Последний призван упростить интеграцию различных технологий масштабирования в игры.

Источник изображения: VideoCardz

DirectSR представляет собой расширение DirectX 12, разработанное Microsoft вместе с AMD, Intel и Nvidia. Оно позволяет добавлять поддержку AMD FSR, Intel XeSS и Nvidia DLSS через единый механизм, значительно сокращая время и объём работы, которые затрачивались для интеграции каждой технологии по отдельности.

Раньше каждую технологию масштабирования приходилось реализовывать вручную с помощью отдельных SDK (за исключением игровых движков со специальными плагинами для масштабирования, которые есть, например, в Unreal Engine 5). С помощью DirectSR все три средства масштабирования можно реализовать одним махом. DirectSR охватывает ключевые функции и особенности, присущие всем технологиям временного масштабирования. В большинстве случаев речь здесь идёт о векторах движения, буферах глубины и цвета, метках реакции и экспозиции.

Поскольку DirectSR технически является альтернативным методом интеграции технологий масштабирования, объединяющим DLSS, XeSS и FSR, новый API от Microsoft должен поддерживаться на уровне графического драйвера для аппаратных решений масштабирования. Это означает, что актуальные версии графических драйверов, например, с аппаратной поддержкой Nvidia DLSS и XMX-совместимой версии Intel XeSS, пока не поддерживают DirectSR, и пользователям придётся перейти на версию драйверов, в которых будет реализована совместимость с новым API.

Microsoft заявляет, что DirectSR в перспективе получит встроенную поддержку вариантов масштабирования, не зависящих от используемого графического процессора. В выпущенной предварительной версии DirectSR компания добавила встроенную поддержку только для AMD FSR 2.2. Однако следует ожидать, что Microsoft добавит встроенную поддержку Intel DP4a (необходимой для программной реализации XeSS, не зависящей от используемого GPU), в будущем обновлении, возможно, в полной версии DirectSR.

DirectSR пока недоступен ни в одной игре, но разработчики уже могут использовать этот API. Он доступен в предварительной версии Agility SDK 1.714.0.

Компания Microsoft ведёт разработку технологии масштабирования изображения Automatic Super Resolution (Auto SR) на уровне операционной системы Windows. Функцию можно будет использовать не только для игр, но и для приложений. Для этого в ОС будут присутствовать соответствующие настройки. Как выяснилось, изначально функция Auto SR будет доступна только для компьютеров, подпадающих под категорию Copilot Plus PC.

Источник изображения: VideoCardz

Copilot Plus PC — новый бренд, которым будут обозначаться ноутбуки на Windows от разных производителей, оснащённые аппаратным обеспечением для работы искусственного интеллекта и поддерживающие функции ИИ во всей операционной системе. Вчера под этим брендом были представлены новые ноутбуки Surface от Microsoft, а также решения от Dell, Lenovo, Samsung, HP, Acer и Asus. Всех их объединяет одна вещь — в их основе используются Arm-процессоры Qualcomm Snapdragon X Elite. Изначально ПК именно с такими процессорами получат поддержку Auto SR. Другими словами, X86-совместимые чипы и даже 10-ядерные Arm-процессоры Snapdragon X Plus поддержку данной функции не получат. По крайней мере, не сразу. Также Auto SR будет работать только с определённым набором «отобранных игр».

Источник изображения: Microsoft

В описании Auto SR компания Microsoft не упоминает никакие другие процессоры, кроме Qualcomm Snapdragon X Elite. Однако в этом году состоится выпуск чипов AMD Strix Point и Intel Lunar Lake, которые должны также стать частью бренда Microsoft Copilot Plus PC.

Хотелось бы надеяться, что Auto SR не будет ограничена только этими процессорами и системами. У Windows сильное сообщество моддеров, поэтому в какой-то момент функция наверняка будет разблокирована для всех платформ и всех игр, если Microsoft сама не расширит её поддержку. А пока можно использовать встроенные в игры технологии масштабирования на уровне драйвера, например, Radeon Super Resolution, или воспользоваться сторонними инструментами, вроде Lossless Scaling.

Технология масштабирования видео Nvidia RTX Video стала доступна в браузере Mozilla Firefox. Технология задействует мощности видеокарт Nvidia GeForce RTX и специальные ИИ-алгоритмы для повышения качества видеопотока, аналогично тому, как работает технология DLSS в играх.

Источник изображений: Nvidia

Очевидную пользу от технологии Nvidia RTX Video могут оценить, например, пользователи платных стриминговых сервисов. Технология масштабирует разрешение изображения видео до более высокого. При этом в данном случае нет необходимости платить за более высокое качество видеопотока. Алгоритмы RTX Video также устраняют артефакты сжатия, улучшают резкость и яркость цвета при использовании режима HDR.

Ранее технология Nvidia RTX Video была доступна только для браузеров Google Chrome и Microsoft Edge. Теперь она стала доступна и для Mozilla Firefox. Также следует отметить, что Nvidia RTX Video поддерживается медиапроигрывателем VLC Media Player.

А технология RTX Video HDR с помощью ИИ-алгоритма автоматически переводит транслируемый SDR-контент в расширенный динамический диапазон (HDR). Однако для оптимальной функциональности рекомендуется наличие монитора с сертификацией не ниже VESA DisplayHDR 600.

Согласно Nvidia, технология RTX Video поддерживается браузером Firefox версии 126 и новее. Для использования RTX Video в браузере Firefox необходимо выполнить следующие шаги:

• установить последние версии драйвера GeForce RTX Game Ready Driver, Nvidia Studio или Nvidia RTX Enterprise;
• убедиться, что в Windows включён режим HDR (Система → Дисплей → HDR);
• открыть контрольную панель Nvidia, перейти в раздел «Регулировка параметров изображения для видео»;
• в пункте «Улучшение видео RTX» включить Super Resolution и High Dynamic Range.

Компания Intel выпустила новую версию своей технологии масштабирования изображения XeSS и сообщила, что поддержка XeSS теперь реализована в более чем 100 различных играх.

Источник изображений: Intel

Новейшая версия технологии масштабирования XeSS 1.3 обеспечивает более высокую производительность по сравнению с предыдущей версией. Однако следует уточнить, что в новой версии были изменены профили масштабирования изображения. Иными словами, хотя компания заявляет о повышении производительности у XeSS 1.3, этот прирост достигается за счёт меньшего разрешения (более высокого уровня масштабирования), а не благодаря той же оптимизации кода самой XeSS.

В новую версию XeSS 1.3 компания добавила алгоритм с новой ИИ-моделью, которая, как заявляется, обеспечивает отображение более визуально сложных элементов, лучшую реконструкцию изображения, улучшенное сглаживание, уменьшение ореолов вокруг объектов и повышенную временную стабильность.

В XeSS 1.3 также представлены два дополнительных профиля настроек масштабирования: Ultra Performance и Ultra Quality Plus. Первые максимально повышают производительность за счёт снижения качества изображения, а вторые призваны минимизировать снижение качества картинки за счёт снижения производительности. Кроме того, в XeSS 1.3 представлена технология Native Anti-Aliasing, являющаяся аналогом Nvidia DLAA и представляющая собой сглаживание без масштабирования.

Как уже говорилось выше, XeSS 1.3 использует иные уровни масштабирования. Настройки «Ultra Quality» теперь обеспечивают масштабирования в 1,5 раза вместо 1,3, в свою очередь настройки «Quality» предлагают масштабирование в 1,7 раза вместо 1,5. Настройки «Balanced» масштабируют картинку в 2,0x вместо 1,7x, «Performance» — 2,3x вместо 2,0x, а «Ultra Performance» масштабирует изображения в три раза.

Intel также приводит несколько сравнений технологий масштабирования XeSS 1.2 и XeSS 1.3. Однако учитывая, что каждый профиль настроек XeSS 1.3 был изменён просто за счёт изменения разрешения, это сравнение может показаться бессмысленным. И всё же окончательные выводы можно будет делать после того, как XeSS 1.3 станет доступна в играх, и можно будет сравнить эффективность профилей настроек обеих технологий, их производительность и, что важнее, обеспечиваемое ими качество изображения.

Intel сообщила, что выпустила новую версию SDK с поддержкой XeSS 1.3, поэтому игровые разработчики уже могут приступать к интеграции новой технологии в свои проекты.

Компания AMD продолжает работу над технологией интеллектуального масштабирования изображения в играх FidelityFX Super Resolution третьего поколения — вскоре она обновится до версии FSR 3.1, а разработчикам игр решение будет доступно со второго квартала.

Источник изображения: amd.com

AMD FSR 3.1 содержит несколько улучшений, в том числе улучшенное качество изображения, поддержку Vulkan и Xbox Game Dev Kit и важное нововведение — разделение технологий генерации кадров и собственно масштабирования. Это значит, что разработчики игр смогут сочетать алгоритм генерации кадров AMD FSR 3.1 с другими технологиями масштабирования, такими как DLSS, XeSS и TSR.

AMD перечислила, в каких направлениях она усовершенствовала FSR в новом выпуске: повышена временная стабильность в покое и движении — уменьшены эффекты мерцания и шума вокруг движущихся объектов; уменьшены эффекты ореолов вокруг объектов; повышено качество сохранения деталей. Кроме того, упрощена отладка для разработчиков и обеспечена совместимость с обновлёнными версиями FSR.

Основные улучшения AMD FSR 3.1 компания продемонстрировала на примере игры Ratchet & Clank: Rift Apart — это одно из первых наименований, где реализована поддержка последней версии. AMD сообщила, что сейчас FSR 3 работает более чем с 40 играми, но официального списка игр с поддержкой FSR 3.1 пока нет. Разработчикам откроется доступ к новой версии технологии через платформу GPUOpen — точная дата не указывается, но известно, что произойдёт это во II квартале.

Технология масштабирования AMD FidelityFX Super Resolution (FSR) была представлена в 2021 году, то есть спустя три года после дебюта технологии NVIDIA DLSS. Первое поколение FSR было основано на простом методе пространственного масштабирования. С выпуском FSR 2 компания перешла к использованию более сложного метода временного масштабирования. Однако в отличие от той же DLSS, FSR не использует ИИ-алгоритмы для работы. Скоро это может измениться.

Источник изображения: VideoCardz

Поскольку FSR не работает с ИИ-алгоритмами, она не требует специальных аппаратных блоков в графическом процессоре видеокарты для эффективной работы. В этом и заключается ключевое отличие между FSR, DLSS от NVIDIA и XeSS от Intel. Две последние используют ИИ для исправления артефактов изображения. Для работы DLSS требуются тензорные ядра. В свою очередь, XeSS выпущена в двух версиях, одна из которых полагается на XMX-ядра в составе GPU видеокарт Intel, а вторая — на инструкции DPAa у поддерживающихся видеокарт от других производителей.

Похоже, AMD тоже занимается вопросом интеграции ИИ в свою технологию апскейлинга. По крайней мере, на это намекнул её технический директор Марк Пейпермастер (Mark Papermaster).

«Для нас 2024 год будет очень важным. Мы потратили много лет на разработку аппаратных и программных возможностей для ИИ. Мы только что завершили разработку искусственного интеллекта для всего нашего портфолио продуктов, включая облачные, периферийные устройства, ПК, а также для наших встроенных и игровых устройств. Мы наделяем наши игровые устройства возможностью масштабировать изображение с помощью искусственного интеллекта. В этом году ожидается масштабное развёртывание [этой технологии]. Теперь у нас есть все возможности для этого. Своих партнёров мы уже известили», — заявил Пейпермастер.

Из слов Пейпермастера можно сделать вывод, что у компании появились возможности для интеграции ИИ в FSR. Правда, в самом заявлении ничего не говорится непосредственно об FSR. Однако поскольку его комментарий касался в том числе и игрового оборудования, то вполне логично предположить, что он имел ввиду именно технологию FSR. Наличие поддержки ИИ сделает её похожей на DLSS и XeSS.

Следует добавить, что DLSS и XeSS являются закрытыми технологиями, а FSR в своём нынешнем воплощении — открытой. Как переход на ИИ-основу скажется на её открытости — неизвестно.

Несколько дней назад сообщалось, что компания Microsoft разрабатывает некую технологию под названием DirectSR. На тот момент было выдвинуто предположение, что речь идёт об универсальной технологии масштабирования изображения в играх, которая будет поддерживаться всеми производителями видеокарт. К сожалению, DirectSR не является универсальным апскейлером.

Источник изображения: VideoCardz

В Microsoft объяснили, что DirectSR — это новый API, предназначенный для игровых разработчиков. Он призван упростить и сделать более универсальным процесс интеграции уже существующих и будущих технологий масштабирования в игровые проекты.

DirectSR был разработан при поддержке ведущих производителей видеокарт в лице NVIDIA и AMD. Новый API собираются представить на конференции GDC 2024 в марте. DirectSR охватывает ключевые функции и особенности, присущие всем технологиям временного масштабирования. В большинстве случаев речь здесь идёт о векторах движения, буферах глубины и цвета, метках реакции и экспозиции. Для эффективной работы апскейлера в игре эти переменные (в случае той же AMD FSR) должны быть распределены между игровыми кадрами. Судя по всему, другие существующие технологии временного масштабирования имеют аналогичные требования и ключевые особенности. DirectSR с одной стороны сделает процесс интеграции различных апскейлеров более универсальным, а с другой — позволит расширить количество переменных для их использования в составе других возможных будущих технологий масштабирования.

«Мы рады анонсировать DirectSR — наш новый API, разработанный при поддержке производителей GPU и предназначенный для упрощения процесса интеграции технологий масштабирования (Super Resolution, SR) в новое поколение игр. Масштабирование изображения является передовой технологией, которая не только увеличивает разрешение в играх, но также позволяет повысить их визуальное качество. DirectSR представляет собой то недостающее звено, которого не хватало разработчикам игр при интеграции апскейлеров для обеспечения наиболее эффективного и плавного игрового процесса независимо от того или иного аппаратного обеспечения. Этот API позволяет использовать технологии масштабирования от разных вендоров через общий набор входных и выходных данных и с помощью одного пути выполнения кода активировать в играх различные решения, включая NVIDIA DLSS Super Resolution, AMD FidelityFX Super Resolution и Intel XeSS. API DirectSR скоро станет доступен в качестве превью-версии в составе пакета Agility SDK для тестирования и отзывов со стороны разработчиков игр», — сообщила Microsoft на своём сайте.

На данный момент самыми популярными технологиями масштабирования являются NVIDIA DLSS2 и DLSS 3 (закрытые технологии, работающие только на видеокартах GeForce RTX), AMD FSR 2 и FSR 3 (обе являются открытыми технологиями), а также Intel XeSS (так и не стала открытой, несмотря на обещания Intel). Также можно выделить TSR в составе Unreal Engine, которая тоже может получить поддержку DirectSR.