Nadchodzi Adreno Neural Fusion, rywal DLSS dla gier na Androida

Qualcomm chce przenieść rozwiązania znane z komputerów gamingowych na smartfony. Firma udostępniła deweloperom pakiet Adreno Neural Fusion, który wykorzystuje sztuczną inteligencję do poprawy jakości obrazu i zwiększania liczby wyświetlanych klatek. Technologia przygotowana dla układów graficznych Snapdragon może stać się mobilnym odpowiednikiem DLSS od Nvidii.

Qualcomm wydał pakiet Adreno Neural Fusion (ANF) SDK, mający na celu poprawę wrażeń z gier mobilnych dla twórców gier na Androida. Technologia ta, opracowana dla procesorów graficznych Snapdragon, łączy w sobie funkcje superrozdzielczości i generacji klatek oparte na sztucznej inteligencji.

Adreno Neural Fusion umożliwia renderowanie gier w niższych rozdzielczościach, podczas gdy sztuczna inteligencja tworzy obrazy o wyższej rozdzielczości. Technologia ta może również zwiększyć liczbę klatek na sekundę wyświetlanych na ekranie poprzez wstawienie nowej klatki między dwie rzeczywiste klatki. Początkowo obsługiwane są platformy Snapdragon 8 Elite Gen 6 i nowsze.

Więcej klatek dzięki AI. Jest jednak pewien haczyk

Rozwiązanie Super Resolution firmy Qualcomm pobiera obrazy utworzone w rozdzielczości o połowę mniejszej i wykorzystuje dane tymczasowe, aby przywrócić je do pełnej rozdzielczości. System łączy dane obrazu z wielu klatek z informacjami o głębi, wektorach ruchu i ruchach kamery. Pod względem zasady działania struktura ta jest podobna do technologii DLSS firmy Nvidia i FSR firmy AMD.

Z drugiej strony, generowanie klatek (Frame Generation) w przybliżeniu podwaja liczbę wyświetlanych klatek poprzez wstawienie klatki pośredniej między dwie rzeczywiste klatki. Należy jednak pamiętać, że wygenerowane klatki nie zwiększają rzeczywistej szybkości symulacji gry. Qualcomm zauważa również, że generowanie klatek może wprowadzić opóźnienie wejściowe równe dodatkowemu czasowi renderowania klatek.

Wsparcie sprzętowe specjalnie dla procesorów graficznych Snapdragon.

W obsługiwanych układach GPU Adreno, ANF wykorzystuje dedykowane rdzenie matrycowe do przetwarzania AI. Qualcomm wykorzystuje również technologię Adreno High Performance Memory (HPM), aby zapobiec ciągłemu przesyłaniu danych pośrednich do pamięci systemowej. Ma to na celu zmniejszenie zapotrzebowania na przepustowość pamięci i poboru mocy podczas rozgrywki.

Nawet bez dedykowanych rdzeni matrycy GPU na kompatybilnym sprzęcie, system nadal może wykorzystywać zasoby NPU. SDK obsługuje aplikacje Android ARM64 z wykorzystaniem Vulkan. Qualcomm zapewnia również zasoby integracyjne dla Unreal Engine 5 i Unity 6.6 i nowszych. Podczas gdy wtyczka Unity koncentruje się obecnie na superrozdzielczości, natywny SDK zapewnia obsługę zarówno superrozdzielczości, jak i generowania klatek.

Technologia Adreno Neural Fusion jest już dostępna dla deweloperów za pośrednictwem publicznego repozytorium Qualcomm w serwisie GitHub. Firma planuje w przyszłości rozszerzyć obsługę na kolejne platformy Snapdragon, ale nie ogłosiła jeszcze harmonogramu kompatybilności.