Sony обяви Quick Spectral Super Resolution (QSSR) – нова библиотека за ъпскейл на базата на изкуствен интелект, разработена за специално стандартната версия на гейминг конзолата PlayStation 5. Първите игри, поддържащи тази технология са Marvel’s Wolverine и Ghost of Yōtei. Днес излизат съответните актуализации и за двете игри.
Технологията QSSR е създадена на базата на PSSR (PlayStation Spectral Super Resolution), която се използва в конзолата PS5 Pro. Според Sony новата реализация е резултат от проекта Amethyst – съвместна инициатива на компанията и AMD в областта на графиката и машинното обучение. За да може реконструкцията на изображенията с помощта на AI да се прилага на графичен процесор от предишно поколение са били разработени оптимизирана невронна мрежа и специална версия на алгоритъма за стандартната PS5.
Конзолата PS5 Pro е оборудвана със специализирано хардуерно оборудване за задачи, свързани с машинно обучение, което предоставя на PSSR значително повече изчислителни ресурси. В стандартната PS5 такова оборудване липсва, поради което в QSSR се прилага различен подход, който при това позволява да се постигне сходно подобрение на детайлността на изображението и времевата стабилност.
Sony планира да направи QSSR достъпна за широк кръг от разработчици на игри за PlayStation. Внедряването на QSSR в игри, които вече поддържат PSSR не би трябвало да изисква значителни усилия. Представители на Sony съобщиха пред изданието Digital Foundry, че QSSR на практика може да замести PSSR без коренна преработка на кода, въпреки че на разработчиците може да са необходими няколко дни за коригиране на параметри като стрийминг на текстури (texture streaming).
Изданието Digital Foundry получи допълнителни технически подробности от екипа на Sony, занимаващ се с изследвания и разработки в областта на графиката. Хардуерът на PS5 Pro осигурява производителност от около 300 TOPS (трилиона операции в секунда) за задачи като PSSR и поддържа изчисления във формат INT8. В същото време QSSR на стандартната PS5 разчита предимно на изчисления във формат FP16, както и използва инструкции за пакетирани изчисления (packed math) и други методи за оптимизиране на работата на GPU.
Тестовете в играта Marvel’s Wolverine показаха, че при реконструкция на изображението от резолюция 864p до 1440p използването на QSSR увеличава времето за изчертаване на кадъра с приблизително 1,5–1,8 ms в сравнение със собствения ъпскейлър на гейминг студиото Insomniac. В режим с отключена честота на кадрите това водеше до разлика от около 8-10 FPS, докато в стандартния режим с целеви 60 FPS загубата на производителност се компенсираше чрез динамично променяща се резолюция.
Натоварването на системата значително се увеличаваше при тестването на QSSR с извеждане на изображение с резолюция 2160p (режим на максимално качество на графиката в Marvel’s Wolverine). В този случай увеличението на времето за изчертаване на кадъра достигаше приблизително 4,4 ms. Sony потвърди, че разработчиците могат да избират различни разделителни способности за рендиране и извеждане на изображението в зависимост от графичния режим, вместо да се ориентират към 4K като стандарт по подразбиране за обикновената версия на PS5.
В случая с Ghost of Yōtei резултатите се оказаха различни. Специалистите от Digital Foundry установиха, че технологията QSSR осигурява приблизително същата честота на кадрите, както и вече внедрената в играта технология FSR 3 в режим „Производителност“ с отключена честота на кадрите. Тъй като QSSR вече е достъпна за всички разработчици на игри за PlayStation, Sony разчита, че тази технология ще бъде използвана както във вече излезлите, така и в бъдещите проекти за PS5.