Перейти к содержимому
Новость

Sony улучшила PSSR на PS5 Pro, заставив нейросеть делать меньше

В обновленном PSSR для PlayStation 5 Pro нейросеть больше не пытается самостоятельно восстановить почти весь кадр. Sony вернула часть работы обычным алгоритмам, и именно это дало более стабильную картинку при меньших затратах ресурсов.

AnVas
Sony улучшила PSSR на PS5 Pro, заставив нейросеть делать меньше

Автор: Изображение создано с помощью ChatGPT

Первая версия PSSR строилась вокруг Color-Predicting Network: сеть напрямую предсказывала цвет выходных пикселей и фактически брала на себя значительную часть реконструкции изображения. В обновленной архитектуре Sony перешла к Kernel-Predicting Network. Нейросеть теперь рассчитывает веса смешивания, а само смешивание выполняют обычные фильтры. Это освобождает модель от операций, для которых давно существуют более дешевые математические методы.

02_960x540_05a3b72aaf

Фото: ITHome


Изменилось и распределение вычислений. В исходной версии около 30% параметров приходилось на уровень 540p, в новой около 90% сосредоточено на 540p и ниже, тогда как на этапе 4K нейросеть почти не работает. Sony также переработала использование данных предыдущих кадров и фильтрацию при больших коэффициентах масштабирования. Заявленный результат: выше временная стабильность, меньше расход памяти и ниже время работы на GPU. Наиболее заметный выигрыш ожидается при низком исходном разрешении.

04_960x540_52baaad69306_960x540_d8b99f8a48

Фото: ITHome


Это хороший пример того, почему развитие нейросетевого апскейлинга не обязательно означает увеличение модели. В случае PSSR полезнее оказалось оставить нейросети распознавание сложных закономерностей, а предсказуемые вычисления вернуть традиционному рендерингу. Обновленный PSSR уже распространяется на PS5 Pro и может применяться к ранее выпущенным играм с поддержкой PSSR через системную настройку.

Источник: ITHome
7 показов