WAN 2.2 is een open-source generatief KI-video-model dat ontwikkeld is door Alibaba's DAMO Academy. Het is een grote upgrade van de basisreeks WAN video-modelserie, ontworpen om hoogwaardige filmvideo's uit tekst- en beeldprompts te maken. Het model is bekend voor zijn geavanceerde bewegingsgeneratie en esthetische controles.

WAN 2.2 is beschikbaar in verschillende versies met verschillende capaciteiten. De kernopen source-modellen zijn het efficiënt Ti2V-5B-model, dat zowel tekst-to-video (T2V) als image-to-video (I2V) met 720p resolutie ondersteunt en kan worden gebruikt op consumentengraad GPU's. Er zijn ook krachtigere 14B-modellen, zoals de T2V-A14B en i2V-A14B, die een Mix-of-experts (MoE) gebruiken voor superieure kwaliteit en prestaties, geschikt voor robuustere hardware.

WAN 2.2 blijkt uit zijn innovatieve architectuur van MoE, die het geluidsproces in gespecialiseerde fasen onderscheidt om betere prestaties zonder een aanzienlijke stijging van de berekenkosten. Het heeft ook esthetische controles op cinematisch niveau, een vermogen om complexe en vloeistofbeweging te genereren en een eerst-laast frame to video (FLF2V) functie die vloede overgangsingen tussen twee beeldingen creërt. De open-source van de aard mogelijk een communautair beheersing en integratie.

Als open-source-model hangt de veiligheid van WAN 2.2 grotendeels af van de implementatie en gebruik. De ontwikkelaars hebben een gebruiksbeleid vastgesteld dat de opwekking van illegale, schadelijke of misleidende inhoud verbiedt. Hoewel het model zelf geen ingebouwd systeem voor inhoudmoderatieprocedure beschikt, wordt verwacht dat ontwikkelaars en platforms die WAN 2.2 gebruiken hun eigen waarborgen zullen uitvoeren om verantwoordelijk gebruik en naleving van wettelijke en ethische normen te garanderen.

WAN 2.2 is zeer optimaliseerd voor snelheid, met name zijn Ti2V-5B model, dat een van de snelste beschikbare is met 720p resolutie en 24fps. Een 5-seconden video kan in slechts enkele minuten worden gegenereerd op een consument GPU zoals een RTX 4090, met krachtigere hardware die nog sneller resultaten biedt. De snelheid wordt verder versterkt door de efficiënte architectuur van de MoE.

WAN 2.2 is voornamelijk een open-source-model op ontwikkelaars gericht. Het beschikt geen officiële, specifieke mobiele app van zijn producent. Omdat het open-source is, kunnen ontwikkelaars het echter integreren in mobiele webtoepassingen of hun eigen mobiele apps maken. De consumentengraad GPU-compatibiliteit maakt het ook toegankelijker voor gebruikers met hoog-end mobiele werkstations.

WAN 2.2 kan een breed verschil van videoinhoud genereren, van korte advertenties en sociaalmedia-clips tot cinematische scenen en animaties. De mogelijkheden zijn tekst-to-video, image-to-video en beeldgebaseerde in-skilderij. Gebruikers kunnen video's genereren met specifieke camerobewegingen, precieze esthetische stijlen en realistische beweging voor personages en objecten, waardoor het een veelvuldig instrument maken voor zowel technische als creatieve projecten.

De meest voorkomende manier om WAN 2.2 te gebruiken is door modelbestanden te downloaden en ze lokaal te lopen op een compatibele machine, vaak met integratie via platforms zoals Comfyui of diffusers. Voor een meer toegankelijke ervaring is het model beschikbaar via cloudAPI-providers. Er is ook een kans om WAN 2.2 gratis te proberen via het Vizard platform, dat een online-interface biedt om met het modelvermogen te experimenteren.