Nova arhitektura FramePack donosi efikasnu AI video obradu dostupnu širem krugu korisnika
Tim istraživača predvođen Lvmin Zhangom i Maneesh Agrawalom sa Stanforda predstavio je FramePack – inovativnu arhitekturu za generisanje video sadržaja pomoću veštačke inteligencije, koja zahteva svega 6GB video memorije.
FramePack koristi fiksni vremenski kontekst, kompresujući kadrove prema njihovoj važnosti, čime značajno smanjuje zahteve za GPU resursima. Model sa 13 milijardi parametara u ovoj arhitekturi može proizvesti video klip dužine 60 sekundi uz minimalne hardverske zahteve.
Standardni AI video modeli zahtevaju veliki VRAM i značajno vreme obrade, dok FramePack postiže slične rezultate uz efikasniju obradu. Time se omogućava kreiranje dužih i kvalitetnijih video sadržaja čak i na srednjeklasnim grafičkim kartama, kao što su RTX 3060 ili 4060.
Tehnika sprečava tzv. “driftovanje” – gubitak kvaliteta kako video traje duže. Softver trenutno funkcioniše samo na RTX 30/40/50 GPU-ovima i podržava FP16/BF16 formate, uz Linux kao potvrđeni OS.
Ovo otvara vrata AI video kreaciji bez potrebe za skupim serverima, što je značajno i za kreatore sadržaja na Balkanu. Bilo da pravite meme, gif ili mini film, AI video obrada je upravo postala pristupačnija.