Компания NVIDIA сегодня выпустила бета-версию универсального приложения, которое объединяет функции GeForce Experience и панели управления графикой NVIDIA в единое целое. Подробнее об этом можно почитать в предыдущей статье. Здесь же подробнее остановимся на одной из функций NVIDIA App, которая позволяет запускать игры в режиме HDR, даже если игра изначально его не поддерживает.

Источник изображений: NVIDIA

Компания NVIDIA добавила в универсальное приложение два новых фильтра Freestyle, которые основаны на ИИ-технологиях. Первым является фильтр RTX HDR, который позволяет запускать игры с поддержкой SDR в режиме HDR. Упоминание о нём было обнаружено дата-майнерами ещё в составе предыдущей версии драйвера. Теперь же фильтр стал доступен для всех пользователей.

По словам NVIDIA всего 10 из 50 самых популярных игр, запускаемых на видеокартах GeForce, имеют родную поддержку расширенного динамического диапазона (High Dynamic Range — HDR). В свою очередь новый фильтр RTX HDR призван автоматически наделить поддержкой HDR бесчисленное количество SDR-игр на базе API DirectX 9, DirectX 11, DirectX 12 и Vulkan. Фильтр налету преобразует SDR-контент в HDR.

В системных требованиях RTX HDR указывается на необходимость использования операционной системы Windows 11 (сборки 22621 и новее), наличие подключённого к ПК монитора с поддержкой HDR, а также видеокарты из серии GeForce RTX 2000 или новее и использование драйвера версии 551.52 или более свежего. Внутриигровые настройки HDR (если таковые имеются) перед использованием RTX HDR нужно отключить. Также нужно отключить функцию Windows AutoHDR в составе Windows 11. Для работы RTX HDR игру необходимо запускать в полноэкранном режиме.

NVIDIA также отмечает, что перед использованием RTX HDR необходимо отключить функции Dynamic Super Resolution (DSR/DLDSR), NVIDIA Image Scaling (NIS) и Fast Sync. Все параметры RTX HDR настраиваются в оверлее NVIDIA. Настройки RTX HDR представлены на изображении ниже.

RTX HDR работает в качестве универсального ИИ-фильтра. Конечно, в любом случае родная и оптимизированная интеграция HDR в составе игры будет всегда являться предпочтительным выбором. Однако для очень многих уже выпущенных ПК-игр эта опция недоступна, потому что эти игры уже не получают никаких обновлений. С функцией NVIDIA RTX HDR это не является проблемой, поскольку она работает со всеми играми.

Для тех, у кого нет HDR-монитора NVIDIA подготовила фильтр RTX Dynamic Vibrance (Динамическая насыщенность RTX). Он основан на фильтре «Динамическая насыщенность», но «приправлен» алгоритмами ИИ, которые отвечают за отображение более ярких цветов без ущерба для качества изображения. В фильтре «Динамическая насыщенность RTX» доступны настройки интенсивности и насыщенности.

Системные требования к фильтру «Динамическая насыщенность RTX» такие же, как к RTX HDR, за исключением наличия HDR-монитора. Оба фильтра можно настроить после запуска игры в оверлее приложения NVIDIA App.

—

NVIDIA готовит обновление ПО, которое позволит конвертировать игровой SDR-контент в HDR в реальном времени при помощи тензорных ядер. Один из пользователей платформы NexusMods опубликовал инструмент, который поможет оценить в деле эту функцию до её официального выхода.

Источник изображения: nexusmods.com

Конвертер игр из SDR в HDR обнаружен в скрытых настройках профиля TrueHDR в драйверах NVIDIA 511.23 (и более поздних). Он предположительно является развитием аналогичного конвертера RTX Video HDR, предназначенного для преобразования видео, а не игр. Наличие подобного средства трудно переоценить: многие игры до сих пор не поддерживают HDR, да и в поддерживаемых наименованиях его реализация далека от идеальной — достаточно вспомнить лишённый инструментов калибровки HDR релиз Starfield, один из крупнейших в ассортименте Microsoft.

У разработчиков нет особого стимула уделять разработке HDR-контента достаточно времени: создание игры с SDR и HDR удваивает объём работы, которую необходимо проделать для цветокоррекции, но увеличение трудозатрат фактически уходит на нужды относительно небольшого числа пользователей, способных использовать преимущества HDR уже сегодня. Многие HDR-мониторы хотя и имеют соответствующую маркировку, но не могут обеспечить достаточно высокой яркости для вывода HDR-картинки. С появлением конвертера от NVIDIA задача разработчиков упростится. Официальной даты выхода этой функции у NVIDIA пока нет — возможно, она ещё недоработана.

Instagram✴ получит поддержку загрузки HDR-фотографий, сделанных на новые смартфоны Samsung Galaxy S24, сообщили представители соцсети и корейского производителя электроники. Устройства Galaxy S24 первыми в мире дадут возможность публикации HDR-фотографий в Instagram✴. Заметим, что поддержка HDR-видео в приложении была реализована ранее.

Работа с HDR стала одной из немногих связанных с фотографированием функций, о которых Samsung сообщила в ходе анонса смартфонов Galaxy S24, S24 Plus и S24 Ultra. Корейский производитель отметил, что встроенные функции камеры будут поддерживаться непосредственно в приложениях Instagram✴ и Snapchat.

Речь идёт о таких функциях телефонов Samsung, как ночная съёмка, которая включается при слабом освещении, режим Super HDR и стабилизация видео. Правда, стабилизацию видео необходимо будет отдельно включить в приложении камеры Samsung — в противном случае съёмка через приложения Instagram✴ и Snapchat будет отличаться излишним реализмом. Стоит отметить, что любители публиковать фотографии в соцсетях едва ли захотят делать снимки прямо в приложениях платформ, в то время как стандартные инструменты Samsung предлагают широкий набор функций редактирования при помощи ИИ: размытие фона, удаление отражений и даже перемещение объектов по кадру.

Компания NVIDIA в рамках выставки CES 2024 представила ещё одну функцию для видеокарт из линейки GeForce RTX, улучшающую качество передаваемого в потоковой трансляции изображения с помощью ИИ.

Источник изображения: Steam (TheFoo77)

Львиная доля контента на YouTube транслируется в низком разрешении, с низкой пропускной способностью и в стандартном динамическом диапазоне (то есть SDR), что на современных 4K-мониторах смотрится не лучшим образом.

В связи с этим NVIDIA разработала сначала RTX VSR (Video Super Resolution) — аналог DLSS для видеотрансляций, повышающий качество стримов в браузере (см. ролик ниже), — а теперь готовит RTX Video HDR.

Как можно догадаться по названию, RTX Video HDR с помощью алгоритма глубинного обучения автоматически переводит транслируемый SDR-контент в расширенный динамический диапазон (HDR).

На CES 2024 прошла закрытая демонстрация новой технологии NVIDIA. Сотрудник PC Gamer, присутствовавший на презентации, описал разницу между SDR-стримом и трансляцией RTX Video HDR как «небо и земля».

Чтобы оценить RTX Video HDR, понадобится видеокарта GeForce RTX (20-й, 30-й или 40-й серий), имеющий совместимость с форматом HDR10 монитор, а также браузер на основе Chromium вроде Google Chrome и Microsoft Edge.

RTX Video HDR появится в драйверах GeForce RTX и NVIDIA RTX до конца января. Как и в случае с RTX VSR, для включения функции будет достаточно активировать её в панели управления NVIDIA.

Компания Canon разработала датчик изображения, который использует новый подход к съёмке с расширенным динамическим диапазоном (HDR). Вместо того, чтобы делать несколько последовательных кадров с разной экспозицией, а затем объединять их в одно изображение, новый сенсор сразу создаёт готовую HDR фотографию за счёт множества областей с автоматически выставляемой оптимальной экспозицией отдельно для каждой области.

Источник изображения: Petapixel

Новый сенсор Canon Type-1 диагональю 24,5 мм с задней подсветкой имеет разрешение 12,6 мегапикселей (4152 на 3024 пикселя). Компания заявляет, что он обеспечивает лучший в отрасли динамический диапазон (по крайней мере, в предполагаемом рыночном сегменте) и уникальным образом решает проблему HDR.

Большинство фотоаппаратов справляются с огромными различиями в экспозиции в светлых и тёмных участках кадра с помощью эксповилки — делая несколько кадров и смешивая их вместе в одну фотографию, часто очень быстро и прямо в камере. Но такой способ хорош только для неподвижных и удобных для съёмки объектов. Если же камера имеет дело с движущимся объектом, объединить изображения может быть затруднительно из-за смещения цели, а фотография получится размытой или нерезкой.

Для решения этой проблемы новый датчик Canon разделён на 736 отдельных областей, для каждой из которых можно установить оптимальное время экспозиции в зависимости от уровня яркости. По сути, датчик может независимо регулировать экспозицию в каждой из этих 736 областей, что даёт ему возможность активно создавать HDR-изображения в режиме реального времени и в камере без необходимости делать несколько кадров.

По утверждению Canon, это предотвращает появление артефактов движения и делает возможным более точное распознавание лиц даже при съёмке движущихся объектов. Более того, конвертация изображения из нескольких исходных не требуется, что резко снижает объем обрабатываемых данных и обеспечивает высокоскоростную съёмку со скоростью до 60 кадров в секунду с разрешением в 12,6 мегапикселей.

Эта «региональная экспозиция» означает, что новый сенсор сможет правильно экспонировать все части в сложных условиях освещения. Например, если камера направлена на въезд в гараж и машина выезжает на солнце, обычные камеры не смогут одновременно показать номерной знак, освещённый солнцем и водителя, который скрыт в тени а новый сенсор справится с задачей без проблем.

Хотя этот сенсор предназначен для промышленного использования и обеспечения безопасности, применённая в нём технология может повлиять на разработку потребительских фотоаппаратов и видеокамер Canon в будущем.

На закрытом мероприятии с производителями компания Google рассказала о программе Project Caviar, в рамках которой разрабатываются медиаформаты для HDR-видео и пространственного аудио — они станут бесплатными альтернативами Dolby Vision и Dolby Atmos.

Источник изображения: mohamed_hassan / pixabay.com

Созданные разработчиками Project Caviar решения будут интегрированы в YouTube — платформа не поддерживает технологии Dolby. Google стремится привлечь к проекту и других игроков отрасли, включая производителей оборудования и поставщиков устройств. Работу в этой области компания начала более десяти лет назад: в 2009 году она поглотила разработчика видеокодеков On2, чтобы открыть исходный код некоторых своих решений; компания также сыграла значительную роль в Alliance for Open Media — консорциума, отвечающего за бесплатный видеокодек AV1.

Отличительной особенностью Project Caviar является то, что речь идёт не об очередном кодеке: компания собирается использовать существующие технологии для создания новых форматов HDR-видео и 3D-аудио — более качественных картинки и звука, как это реализовано в Dolby Vision и Dolby Atmos. Выступавший на презентации менеджер по продуктам Google Рошан Балига (Roshan Baliga) не упомянул Dolby напрямую, но отметил, что затраты на лицензирование «могут навредить производителям и потребителям».

Источник изображения: kaboompics / pixabay.com

Значительная часть выручки Dolby поступает за счёт лицензионных сборов с производителей оборудования. По некоторым данным, роялти за Dolby Vision составляет от $2 до $3; размеры выплат за Dolby Atmos не разглашаются, но в случае с консолями Xbox они составляют $15 с приставки. Один из производителей телеприставок с оптовой ценой $50 выплачивает по $2 с каждой за использование Dolby Vision и Dolby Digital. С засильем платного решения попыталась бороться Samsung, которая при участии других игроков разработала технологию HDR10+, однако её лицензируемая альтернатива Dolby Vision уже поддерживается такими сервисами как Netflix, Disney+ и HBO Max. А благодаря Apple Music технология Dolby Atmos стала стандартом пространственного звука.

Сейчас бесплатное решение для пространственного звука разрабатывает Alliance for Open Media, куда входят Amazon, Google, Netflix, Meta✴ и Samsung — формат получил название Immersive Audio Container, но едва ли он сможет противостоять маркетингу Dolby без поддержки. Поэтому Google в рамках Project Caviar решила добиться того, чтобы альтернативы Vision и Atmos предлагали больше возможностей: широкий набор звуковых настроек для пространственного аудио и поддержка съёмки в HDR10+ с возможностью упрощённой загрузки материалов на YouTube и другие службы.

Для Dolby появление мощного конкурента может иметь серьёзные финансовые последствия: в 2021 году 25 % выручки компании пришлось на Atmos, Vision и патенты на технологии вывода изображения, но в перспективе компания хочет зарабатывать на этих решениях столько же, сколько на кодеках.