Generowanie wideo z użyciem AI może odbywać się nawet na zwykłych kartach graficznych. FramePack obiecuje możliwość korzystania z modelu o 13 miliardach parametrów na jedynie 6 GB VRAM.
Na GitHubie pojawił się FramePack, czyli nowe narzędzie do generowania wideo za pomocą sztucznej inteligencji. Z opisu dowiadujemy się, że może ono przetwarzać dużą liczbę klatek przy zastosowaniu modelu z 13 miliardami parametrów nawet "na procesorach graficznych laptopów".
FramePack wymaga układu graficznego przynajmniej z rodziny GeForce RTX 30 lub nowszego.
W praktyce FramePack wymaga układu graficznego przynajmniej z rodziny GeForce RTX 30 lub nowszego ze wsparciem dla bf16 oraz fp16. Minimalna ilość pamięci VRAM potrzebna do działania to natomiast jedynie 6 GB.
Szczegóły dotyczące wydajności
Aby wygenerować 60-sekundowe wideo w 30 FPS z użyciem modelu o 13 miliardach parametrów wystarczy karta graficzna z 6 GB pamięci. Oczywiście im mocniejszy jest sprzęt, tym lepiej. Autor przetestował działanie narzędzia na swoim komputerze stacjonarnym z RTX 4090. Prędkość generowania wynosiła bez optymalizacji 2,5 sekundy na klatkę. Przy użyciu laptopowej wersji RTX 3060 czas ten miał się jednak wydłużyć 8-krotnie.
Narzędzie dostępne jest w serwisie GitHub, gdzie przedstawiono również wiele efektów jego działania.
Pokaż / Dodaj komentarze do: Ten generator wideo AI zadowala się 6 GB VRAM. Zadziała nawet na podstawowych kartach