Аннотация:
В новом патенте Sony описана система генерации кадров, которая объединяет векторы движения от игрового движка и входные данные контроллера для прогнозирования действий игрока, что потенциально снижает воспринимаемую задержку на будущих консолях PlayStation. Эта технология может появиться на PS6, но это пока не подтверждено. В статье также поднимаются такие проблемы, как визуальные артефакты и разработчики, полагающиеся на сгенерированные кадры, а не на оптимизацию.

Как бы там ни было, но технологии улучшения изображения и генерации кадров с помощью искусственного интеллекта — это будущее игровой индустрии. Технология улучшения изображения NVIDIA DLSS, AMD FSR и Intel XeSS используются в компьютерных играх уже более 5 лет, а их технология генерации кадров также используется в течение 3 лет. Технология улучшения изображения теперь применяется и к игровым консолям. Технология улучшения изображения PSSR в PlayStation 5 Pro была запущена два года назад, а консоли Xbox Series Xbox будут поддерживать технологию FSR с 2022 года.
После PSSR технология генерации кадров, очевидно, станет следующей целью разработки консолей Sony PlayStation. IGN подтвердил это в интервью Марку Черни, главному архитектору PS5 и PS5 Pro и старшему вице-президенту по вычислениям и графике AMD. Теперь Sony раскрыла свои планы реализовать генерацию кадров в своей консоли PlayStation следующего поколения, предварительно названной PS6, в новой заявке на патент.
Generation Super Sampling (US-20260320740-A1) — это новый патент на технологию генерации кадров, который компания Sony подала на свою игровую консоль. Возможно, мы впервые увидим эту технологию на консоли PS6. Хотя основная концепция остается прежней, модель анализирует визуализированный кадр и создает копию кадра. Однако PlayStation внесла значительные улучшения в способ создания этого кадра-реплики.
В процессе генерации кадра DLSS модель анализирует визуализированный кадр и использует векторы движения из игрового движка. Но помимо использования векторов движения из игрового движка, PlayStation стремится учитывать входные данные контроллера, чтобы более точно предсказать, как игроки будут двигаться в каждом кадре.
Как описано в патенте, этот подход предназначен для уменьшения задержки ввода или, по крайней мере, создания иллюзии чрезвычайно низкой задержки. Патент также не исключает возможность генерации нескольких кадров, заявляя: «В некоторых вариантах реализации предсказание не ограничивается следующим изображением в потоке изображений. Систему декодера можно обучить прогнозировать любое количество изображений до или после входного изображения».
Что это может означать для консольных игр
В настоящее время большинство людей согласятся с тем, что технология генерации кадров не нужна для консольных игр, особенно когда PS5 использует оборудование AMD, а FSR все еще совершенствует свое решение для генерации кадров. Все консоли текущего поколения поддерживают частоту обновления до 120 Гц, поэтому частота кадров выше 120 Гц ухудшает качество изображения из-за появления артефактов.
Кроме того, технология генерации кадров может продолжить тенденцию неоптимизированного портирования компьютерных игр на консольные платформы, и разработчики могут полагаться на эту технологию, чтобы восполнить недостаток оптимизации игр. Если будет принята технология генерации кадров, это должна быть переключаемая опция, а не требование.
Комментарии