NVIDIA Maxine - nowa platforma, która poprawi jakość wideokonferencji

Wideokonferencje jeszcze nigdy nie były tak istotne jak w dobie globalnej pandemii COVID-19. NVIDIA postanowiła więc pochylić się nad tym tematem i zaprezentowała nowe rozwiązanie, które poprawić ma jakość obrazu i dźwięku w trakcie tego typu połączeń. Maxine to nowa platforma Zielonych, która napędzana jest sztuczną inteligencją bazującą na chmurze. Deweloperzy mogą z niej korzystać, by poprawić swoje oprogramowanie do wideokonferencji, a jej funkcje zawierają skalowanie rozdzielczości, tłumaczenie w czasie rzeczywistym, redukcję przepustowości, napisy dla osób niesłyszących, auto-framing i redukcję szumów z otoczenia. By zredukować przepustowość, NVIDIA wykorzystuje sztuczną inteligencję, która analizuje “kluczowe punkty twarzy” i następnie reanimuje twarze użytkowników w wideo. To sprawia, że nie wszystkie piksele naszej twarzy muszą być streamowane. Producent chwali się, że cięcie w konsumpcji przepustowości z wykorzystaniem kompresji H.264 wynosi nawet 10%. Powinno być to bardzo pomocne w przypadku limitów łącza, np. podczas połączeń z wykorzystaniem mobilnego internetu. 

NVIDIA zaprezentowała nowe rozwiązanie, które poprawić ma jakość obrazu i dźwięku w trakcie wideokonfernecji...

Narzędzia dostępne w ramach platformy Maxime pozwalają nawet na korekcję wzroku i wyrównanie twarzy. Dzięki temu rozmówcy zdawać będą się patrzeć na siebie i symulowany będzie tu nawet kontakt wzrokowy, nawet jeśli kamera internetowa znajduje się w nietypowym miejscu. Deweloperzy mogą nawet dodać animowane awatary, które poruszają się w oparciu o głos osoby i jej emocjonalny ton. Co więcej, wirtualni asystenci mogą być zintegrowani w ramach wideokonferencji, wykonując za nas notatki lub inne zaprogramowane czynności, w tym nawet odpowiadać na pytania ludzkim głosem. “Wideokonferencje są obecnie częścią naszego codziennego życia, pomagając milionom osób uczyć się, pracować i grać lub nawet zasięgać konsultacji u lekarza. Maxine integruje nasze najbardziej zaawansowane możliwości wideo, audio i SI, przynosząc przełomowe rozwiązania platformom łączącym ludzi.”  

Warto przypomnieć, że właściciele kart graficznych RTX niedawno otrzymali funkcję NVIDIA Broadcast, czyli zestaw narzędzi wykorzystujących możliwości tych GPU do ciekawych efektów, takich jak zamazywanie tła podczas streamingu czy eliminowanie szumów dźwiękowych z naszego otoczenia. Część z funkcji Maxine, takie jak wykrywanie wzroku, napisy dla osób niesłyszących, tłumaczenie w czasie rzeczywistym i nawet animowane twarze, zaimplementowane zostały już przez niektóre firmy. Niemniej jednak, dzięki nowej technologii NVIDII deweloperzy nie muszą już kupować drogich GPU, by wykorzystać możliwości sztucznej inteligencji i mogą skorzystać z narzędzi udostępnianych w chmurze. To powinno sprawić, że zaawansowane funkcje będą jeszcze popularniejsze. Jak na razie jednak tylko Avaya zadeklarowała, że skorzysta z Maxine.