Компания AMD в рамках своего мероприятия Gaming Festival 2023 на выставке Gamescom сообщила, что поддержку технологии масштабирования изображения FidelityFX Super Resolution (FSR) версии 3 первыми получат две игры — Forspoken и Immortals of Aveum. В перспективе список поддерживаемых игр будет расширяться. Важной особенностью технологии станет технология генерации дополнительных кадров, что повысит FPS в играх.

Источник изображений: AMD

В составе новой версии FSR используется технология генерации дополнительных кадров в играх Fluid Motion Frames (FMF), которую можно сравнить с технологией генератора кадров DLSS3 Frame Generation от компании NVIDIA. Последняя значительно повышает FPS в играх, генерируя дополнительные кадры на основе данных о предыдущих, но вместе с этим увеличивает время задержки.

Сокращение времени задержки также будет ключевым направлением для FSR 3, поскольку компания понимает, что геймерам нужны не только высокая частота кадров в играх, но и максимально быстрый отклик на действия игрока. В AMD отметили, что интеграция FSR 3 в игры, где уже присутствует поддержка FSR 2, не будет представлять никаких сложностей.

Первыми играми, в которых будут использованы возможности FSR 3, являются Forspoken и Immortals of Aveum. Первая вышла в январе и судя по обзорам и отзывам игроков не оправдала ожиданий. Вторая в свою очередь была выпущена несколько дней назад. Это первая игра, использующая игровой движок Unreal Engine 5.1.

На сегодняшней презентации AMD показала возможности FSR 3 в игре Forspoken, запущенной в разрешении 4K, при использовании максимальных настроек качества изображения с трассировкой лучей. Для демонстрации был выбран режим FSR 3 «Производительность». Благодаря этому частота кадров игры увеличилась более чем в три раза.

Минимальные требования для FSR 3 подразумевают наличие видеокарты уровня Radeon RX 5000 и новее или же видеокарт NVIDIA GeForce RTX 2000 и новее. Поддержка FSR 3 будет распространяться по лицензии MIT. Технология будет также совместима с консолями. AMD ожидает, что патчи с поддержкой FSR 3 для Forspoken и Immortals of Aveum выйдут во второй половине сентября.

Intel опубликовала доклад о последних достижениях в области моделирования освещения с использованием технологии трассировки пути. Инженеры компании работают над повышением эффективности этой технологии и возможностью обеспечения её поддержки даже встроенной графикой центральных процессоров, а не только дискретными GPU.

Источник изображения: nvidia.com

В документе приводятся ссылки на три работы, по материалам которых исследователи подразделения Intel Graphics выступят на мероприятиях SIGGRAPH, EGSR и HPG. Исследования направлены на оптимизацию обработки графики и повышение производительности графических процессоров за счёт снижения числа вычислений, необходимых для отрисовки отражений света.

В первом из докладов приведён новый метод обсчёта отражений от материалов с шероховатой структурой с использованием GGX — технологии, упрощающей моделирование отражённого света. Структура материалов сводится к полусферическим зеркалам, моделировать которые относительно просто.

Второй материал предлагает новый, более эффективный метод прорисовки блестящих поверхностей в трёхмерной среде. Инженеры Intel признают, что симуляция блестящих поверхностей пока остаётся «открытой проблемой», но новый метод предлагает учитывать среднее число видимых бликов для каждого пикселя. Это значит, что графический процессор при работе может ограничиться лишь теми бликами, что видны человеческому глазу.

В третьей статье речь идёт о построении траекторий световых лучей при различных сценариях освещения — в «смешанных моделях цепей Маркова для прямого освещения в реальном времени». Инженеры Intel предложили довольно сложную методику, которая позволяет оптимизировать прорисовку сложного прямого освещения в реальном времени.

Предложенные Intel решения пока не гарантируют, что встроенные графические процессоры смогут в одночасье справляться с трассировкой пути, но они направлены на оптимизацию решения этой задачи при различных условиях, а их внедрение поможет ускорить работу как интегрированной, так и дискретной графики. Но появление такой возможности на встроенных графических подсистемах стало бы значительным достижением: технология трассировки лучей в реальном времени вышла на широкий рынок в 2018 году, и для её работы по-прежнему требуются значительные ресурсы. Даже флагманским видеокартам 60 кадров в секунду в играх класса AAA даются непросто. И когда Intel добьётся успеха с интегрированной графикой, трассировка лучей станет мейнстримом.

Технологии масштабирования изображения NVIDIA DLSS, AMD FSR и Intel XeSS, поддерживающиеся современными видеокартами соответствующих производителей, могут значительно повысить производительность в играх без серьёзных компромиссов в качестве. Однако большинство игр не поддерживают все три технологии сразу. Но проблема заключается не в технологических особенностях каждой из этих технологий, как могло бы показаться на первый взгляд, а в маркетинге.

Источник изображения: NVIDIA

По словам Нико ван Бентума (Nico van Bentum), программиста графики из компании Nixxes Software, реализовать поддержку сразу всех трёх апскейлеров в той или иной игре на самом деле несложно, поскольку все три API очень похожи между собой. Именно поэтому энтузиасты и моддеры имеют возможность самостоятельно добавлять поддержку DLSS и XeSS в игры с FSR 2 или наоборот.

«У нас есть относительно простая оболочка вокруг DLSS, FSR2 и XeSS. Все три API сегодня настолько похожи друг на друга, что на самом деле оправданий [не добавлять их все в одну игру] нет», — заявил разработчик Nixxes Software на своей странице в Twitter.

Одна из самых ожидаемых игр этого года, Starfield от Bethesda, похоже, не получит официальную поддержку технологии NVIDIA DLSS 3, поскольку AMD договорилась с разработчиком игры по вопросу её оптимизации для видеокарт Radeon. Однако в этом вопросе на помощь готов прийти моддер PureDark, который ранее весьма успешно интегрировал поддержку DLSS 3 в игры, которые эту технологию официально не поддерживают. К настоящему моменту энтузиаст самостоятельно «встроил» поддержку технологии масштабирования NVIDIA в такие игры, как Elden Ring и Star Wars Jedi: Survivor.

NVIDIA выпустила обновление 3.1.13 для SDK DLSS. В него были внесены некоторые изменения, предназначенные для расширения визуальных возможностей игр, в которых реализована технология NVIDIA DLSS. Например, появилась поддержка специального режима сглаживания без масштабирования.

Источник изображений: NVIDIA

В новой версии DLSS SDK компания добавила новый режим — DLAA (Deep Learning Anti-Aliasing), который можно будет выбрать в меню DLSS после его добавления разработчиком игры. DLAA улучшит изображение с помощью сглаживания, но при этом картинка не будет масштабироваться, как это происходит в других режимах DLSS. Таким образом DLSS сможет предложить пять режимов работы: «Ultra-Performance Mode» (максимальная производительность), «Performance Mode» (производительность), «Balanced Mode» (баланс качества и производительности), «Quality Mode» (качество) и «DLAA» (сглаживание без масштабирования). Необходимый инструментарий NVIDIA опубликовала в своём репозитории на сайте GitHub.

Кроме того, в описании обновления SDK обнаружен неизвестный пресет с литерой G, предназначенный для игрового движка Unreal Engine. В настоящее время он не используется, и у него нет описания. Возможно, Preset G будет добавлен в одном из следующих обновлений. Компания также без подробностей сообщила, что исправила в новой версии SDK DLSS некоторые ошибки и баги.

С выходом технологии DLSS третьей версии она обзавелась функцией генерации кадров, которая значительно повышает производительность графики в играх, особенно тех, которые интенсивно используют возможности GPU, включая ту же Cyberpunk 2077. В перспективе всё больше игр получат поддержку данной технологии. Так, поддержку генерации кадров в ближайшее время получит игра Ratchet & Clank: Rift Apart, которая выйдет на ПК спустя два года с момента релиза на игровой консоли PlayStation 5. Её выход ожидается 26 июля.

Так как технологии масштабирования изображения AMD FSR 2 и NVIDIA DLSS 2 одновременно используются множеством современных игр, у обозревателей появилась возможность напрямую сравнить их качество и быстродействие. Один из таких тестов опубликовал YouTube-канал HardwareUnboxed, сравнивший обе технологии в 26 играх.

Источник изображения: HardwareUnboxed

Для тестирования использовались два режима AMD FSR 2 и NVIDIA DLSS 2 — «Производительность» и «Качество». Игры запускались в разрешении 4K и 1440p. Поскольку обе технологии масштабирования обеспечили практически одинаковый уровень производительности, основное внимание в исследовании уделялось именно качеству конечного результата работы апскейлера.

Tie — одинаковый результат, DLSS+ — небольшое преимущество, DLSS++ — заметное преимущество, DLSS+++ — значительное преимущество

В общей сложности было проведено 108 игровых тестов. Лишь в восьми случаях FSR 2 продемонстрировала идентичный результат по сравнению с DLSS 2. Во всех других — технология NVIDIA превзошла решение AMD в графическом плане.

В рамках тестов было отмечено, что DLSS лучше справилась с реконструкцией кадра в большинстве случаев. В результате работы технологии NVIDIA также возникало меньше артефактов вроде мерцаний по сравнению с FSR. Наибольшая разница между DLSS и FSR возникла в режиме производительности.

Компания Google анонсировала выпуск нового графического API WebGPU для аппаратного ускорения графики в браузере Chrome. Он доступен в бета-версии Chrome 113. Разработка графического API WebGPU ведётся с 2017 года. Технология использует современные вычислительные возможности GPU и предоставляет разработчиками более широкий доступ к различным низкоуровневым возможностям и функциям.

Источник изображений: Google

WebGPU — это новый веб-стандарт и набор инструкций для аппаратного ускорения графики и вычислений. Подобно DirectX и Vulkan, WebGPU позволяет осуществлять рендеринг непосредственно на графическом процессоре видеокарты с доступом к более продвинутым функциям. WebGPU обещает снизить нагрузку на JavaScript при том же уровне графики и более чем трёхкратное улучшение выводов из моделей машинного обучения. Это стало возможным благодаря более гибкому программированию на графическом процессоре и доступу к расширенным возможностям, которые не предоставлял предыдущий WebGL.

Новый API является результатом совместной разработки компаний Google, Mozilla, Apple, Intel и Microsoft. Первая реализация уже доступна в Chrome. В браузерах Firefox и Safari новинка появится позже. WebGPU поддерживает macOS, ПК под управлением Windows с DirectX 12, Chrome OS с поддержкой Vulkan. В Google сообщают, что поддержка Android и Linux появится в ближайшее время.

Более подробно о поддержке WebGPU браузером Chrome можно узнать в официальном блоге разработчиков браузера. Многие широко используемые библиотеки WebGL уже находятся в процессе внедрения поддержки WebGPU. С примерами работы WebGPU можно ознакомиться на ресурсах Babylon.js и Three.js. Первый уже внедрил полную поддержку WebGPU, второй находится в процессе. Для ознакомления с примерами необходимо установить бета-версию браузера Chrome 113.

Компания AMD, как и обещала, выпустила специальный плагин, позволяющий легко интегрировать технологию FidelityFX Super Resolution 2.2 в состав игр на базе графического движка Unreal Engine.

Источник изображений: AMD

Открытой технологию масштабирования изображения FidelityFX Super Resolution 2.2, в которой была улучшена обработка ореолов вокруг движущихся объектов, компания AMD сделала около двух недель назад.

За счёт изменений в алгоритмах версия FSR 2.2 обеспечивает меньшее количество шумов, артефактов, мерцаний и улучшает вывод изображения с расширенным динамическим диапазоном (HDR). Благодаря FSR 2.2 изображение станет более чётким, а шлейфов от динамичных объектов будет меньше. Также указывается, что в пакет FSR 2.2 добавлен новый API debugger для простого перехода с FSR 2.0 и FSR 2.1 на FSR 2.2. В общем, это важный эволюционный шаг развития технологии перед её переходом на версию 3.0.

По словам AMD, технология масштабирования FSR 2 уже доступна в 110 играх, а FSR 1 поддерживается в 250 играх. Наличие специального плагина интеграции FSR 2.2 в играх на базе Unreal Engine безусловно должно способствовать ускорению её адаптации в составе различных игровых проектов.

В ходе CES 2023 в начале года компания AMD объявила о выпуске новой версии технологии масштабирования FidelityFX Super Resolution 2.2, в которой была улучшена обработка ореолов вокруг движущихся объектов. Это оказалось особенно актуально для динамичных гоночных игр, поэтому первыми поддержку FSR 2.2 получили игры Need for Speed Unbound и F1 22. Теперь AMD сообщила, что опубликовала исходный код FSR 2.2, чтобы сделать технологию доступной для всех разработчиков.

Источник изображений: AMD

За счёт изменений в алгоритмах новая версия FSR 2.2 обеспечивает меньшее количество шумов, артефактов, мерцаний и улучшает работу расширенного динамического диапазона (HDR). Благодаря FSR 2.2 изображение станет лучше, более чётким, а шлейфов от динамичных объектов будет меньше. Также указывается, что в пакет FSR 2.2 добавлен новый API debugger для простого перехода с FSR 2.0 и FSR 2.1 на FSR 2.2.

В AMD отметили, что в скором времени FSR 2.2 должна появиться в качестве плагина для Unreal Engine. Согласно статистике компании, технология масштабирования FSR 2 уже доступна для 110 игр, а FSR 1 поддерживается в 250 играх.

Оценить качество картинки и повышение производительности при использовании FSR 2.2 можно по демонстрации технологии в Forza Horizon 5.

Исходный код технологии масштабирования FidelityFX Super Resolution 2.2 опубликован в репозитории GPUOpen на сайте GitHub.

Стриминговое ПО NVIDIA Broadcast получило интересную функцию. Приложение может имитировать взгляд пользователя в объектив камеры даже в случае, если смотрит совсем в другую сторону. Использующая алгоритмы ИИ функция Eye Contact заменяет изображение глаз их имитацией со «взглядом», направленным точно в камеру. Правда, работает она далеко не всегда корректно.

Источник изображения: NVIDIA

По словам разработчиков, функция Eye Contact упрощает запись видео и освобождает пользователя от необходимости смотреть точно в объектив камеры. Таким образом можно общаться с удалёнными собеседниками, читая постороннюю информацию или одновременно набирая текст на клавиатуре. В NVIDIA утверждают, что «имитированные» глаза будут точно того же цвета, что и настоящие, кроме того, поддерживается отключение функции, если пользователь отвёл взгляд слишком далеко.

На демонстрационном видео можно оценить качество работы функции: слева размещено видео с камеры без редактированного контента, справа — оно же с расположенной рядом камеры после обработки NVIDIA Broadcast. Нетрудно заметить, что Eye Contact пока является не вполне идеальным решением — временами глаза движутся хаотично, а радужная оболочка то расширяется, то сужается. При желании можно увидеть и другие недостатки. Впрочем, для собеседника, внимательно не всматривающегося в экран, разница будет не столь заметной.

Многие техногиганты в последнее время объявили о сокращениях тысяч сотрудников. Общего тренда решила придерживаться и Adobe, но в гораздо меньшем масштабе. Компания объявила, что избавится от 100 человек в попытке сократить расходы.

Источник изображения: Adobe

Как сообщает Bloomberg, некоторые сотрудники, теряющие рабочие места, по данным источников издания, получат возможность занять в Adobe другие должности. В целом по своим масштабам сокращения в Adobe не идут ни в какое сравнение с увольнениями в Amazon, HP, Cisco, Meta✴ и других бизнесах. По итогам фискального третьего квартала в Adobe работали более 28 700 человек.

Как сообщила сама Adobe, компания «перевела часть сотрудников на позиции, поддерживающие критические инициативы», и сократила «небольшое количество» прочих рабочих мест. «Adobe не занимается увольнениями в масштабах всей компании», — подчеркнули в Adobe.

В сентябре компания анонсировала соглашение о покупке более мелкого конкурента — Figma за $20 млрд. Это одна из крупнейших сумм, когда-либо заплаченных за покупку частного разработчика программного обеспечения. Теперь Министерство юстиции США расследует обстоятельства сделки в поиске потенциальных нарушений антимонопольного законодательства. Известно, что Adobe, доминирующая на рынке программного обеспечения для профессиональных авторов графического контента, намерена расширить базу для привлечения малых бизнесов и «случайных» пользователей.

Компания должна обнародовать итоги фискального четвёртого квартала 15 декабря. В этом году её акции, как и ценные бумаги многих других IT-компаний, значительно упали в цене. В случае с Adobe спад составил порядка 42 % на фоне общего упадка на рынке разработки ПО.

Компания Adobe предоставила возможность продажи стоковых изображений в своём фотобанке, созданных с помощью генеративных ИИ-программ вроде Dall-E и Stable Diffusion. Пока нейросети критикуются за способность отнять заработок у художников и возможные правовые последствия их применения, компания уже берёт их на вооружение.

Источник изображения: Adobe

На конференции в октябре Adobe рассказала о большой роли, которую ИИ призван сыграть в генерации контента в будущем. В компании заявили, что видят ИИ в качестве дополнения, а не замены обычным художникам.

Сейчас в компании сообщили, что принимают у художников работы, созданные с использованием ИИ, на общих основаниях — при этом необходимо недвусмысленно обозначить использование нейросетей при их создании. Компания уже начала тестировать механизм сотрудничества ещё до официального анонса.

По словам представителя компании, в Adobe «приятно удивлены», поскольку работы соответствуют заданным компанией стандартам качества. Впрочем, некоторые владельцы площадок для торговли цифровым контентом подходят к вопросу более осторожно из-за юридических рисков.

В Adobe, напротив, не боятся возможных правовых проблем. Компания требует от авторов подтвердить, что те имеют необходимые права на подаваемые работы, она готова возмещать покупателям стоковых изображений возможный ущерб в случае проблем с законом. Кроме того, запрещено подавать на продажу изображения, связанные с определёнными людьми, местами или собственностью, а также имитировать стили художников без разрешения правообладателей.

Это весьма важно с учётом того, что до сих пор имеется ряд вопросов, связанных с генеративными ИИ-системами. В частности — не до конца понятно, имеют ли люди, чьи работы использовались для обучения ИИ, право предъявлять претензии к владельцам таких систем и, в частности, работам, которые они генерируют.

На конференции Max для фотографов, видеомонтажёров, иллюстраторов и прочих креативных людей компания Adobe представила необычный инструмент Project Blink на базе искусственного интеллекта. После загрузки видео в облако можно искать в ролике персонажей, объекты и слова с последующей возможностью удалять или редактировать контент.

Источник изображения: Adobe

Фактически после обработки система ИИ превращает видео в скрипт с текстовыми элементами, по которым можно вести поиск. Тестирование технологии уже доступно на специальном ресурсе Adobe.

Возможности системы позволяют идентифицировать в медиапотоке говорящего и «отправлять в корзину» фрагменты видео со словами-паразитами или в полуавтоматическом режиме устранять моменты с затянувшимся молчанием — это незаменимо для блогеров. Достаточно удалить фрагмент речи из текста, чтобы соответствующая часть видео исчезла из ролика.

Источник изображения: Adobe

Можно набрать в поиске «счастлив» или «смеётся» для поиска людей, демонстрирующих подобные эмоции. Наконец, можно просто полностью удалить какого-либо человека из видеоролика, не прибегая к ручному поиску.

На примере Blink отчётливо видно, насколько активно компания Adobe внедряет элементы ИИ в свои продукты. Недавно она также представила инструменты, позволяющие создавать 3D-объекты из серии фотографий, работать с объектами, как со скульптурной глиной в метавселенной, а в новой версии Lightroom можно выделять людей или даже их отдельные части одним кликом мыши.

Компания Adobe выпустила новые программные инструменты, призванные упростить создание трёхмерных цифровых объектов для маркетинговых кампаний, видеоигр и метавселенной.

Источник изображения: Rubaitul Azad/unsplash.com

Adobe долгое время доминировала на рынке решений для графического дизайна, эту позицию она намеревалась укрепить, потратив в прошлом месяце $20 млрд на покупку компании Figma. В последние годы Adobe также активно инвестировала в создание трёхмерного контента. Ожидается, что подобному контенту найдётся немало места в метавселенной Meta✴ Platforms, а также виртуальных мирах других разработчиков.

В недавнем прошлом создание трёхмерных объектов было довольно трудоёмким процессом, поэтому Adobe представила новые инструменты, способные упростить создание подобных моделей.

Инструмент 3D Capture позволяет делать серии фото объектов реального мира практически с помощью любой камеры, включая камеры смартфонов, после чего изображения объединяются в трёхмерный цифровой объект. Изначально новинка будет использоваться в сфере электронной коммерции, например, продавец обуви сможет создать «виртуальную примерочную» с элементами дополненной реальности для проверки того, как смотрится обувь на ногах.

Ещё один инструмент Adobe позволяет создателям контента переключаться с редактирования 3D-объекта на компьютере на манипуляции с ним в виртуальном мире с помощью гарнитуры виртуальной реальности. ПО обеспечивает возможности, сходные с теми, что имеются у художников, работающих со скульптурной глиной, которая до сих пор используется в дизайне новых объектов. При этом пользователю будет доступна точность манипуляций, характерная для работы со специальным дизайнерским софтом. Переключение режимов будет чрезвычайно полезно для создания новых визуальных решений.

Ранее сообщалось, что Adobe обновила пакет Lightroom, усовершенствовав инструменты редактирования фото с помощью алгоритмов искусственного интеллекта.