Unsplash
Netflix lanceert een eigen AI-videotool
Netflix heeft een nieuwe AI-tool uitgebracht waarmee video’s niet alleen visueel, maar ook inhoudelijk aangepast kunnen worden. De tool heet VOID, kort voor Video Object and Interaction Deletion, en is opvallend genoeg direct als open source beschikbaar gemaakt.
Wat VOID anders maakt dan bestaande videobewerkings-AI is dat het niet stopt bij het weghalen van een object, meldt Tweakers. Het systeem past ook de rest van de scène aan, zodat alles logisch blijft kloppen.
De AI begrijpt het precies
Het voorbeeld dat Netflix zelf geeft is simpel, maar veelzeggend: twee auto’s botsen. Haal je er met VOID één weg, dan blijft de andere niet stilstaan in een onlogische positie, maar rijdt die gewoon door. De AI begrijpt dus wat er gebeurt in een scène en past dat aan.
Hetzelfde geldt voor kettingreacties. In een rij omvallende blokken kun je bijvoorbeeld de middelste verwijderen, waarna het laatste blok ineens niet meer omvalt.
Hoe het werkt
Technisch werkt VOID in meerdere stappen. Eerst selecteert een gebruiker een object dat moet verdwijnen. Vervolgens analyseert een zogenoemd vision-language model de scène en berekent hoe de rest zich zou moeten gedragen zonder dat object. Daarna volgt eventueel nog een tweede bewerking om visuele fouten en artefacten weg te werken.
Veel AI-tools kunnen inmiddels objecten uit beelden halen, maar houden geen rekening met wat dat betekent voor de rest van de scène. VOID probeert dat wel te doen.
Opvallend is dat Netflix de tool niet achter slot en grendel houdt. VOID is beschikbaar via platforms als Hugging Face en valt onder de Apache 2.0-licentie. Dat betekent dat ontwikkelaars het model vrij mogen gebruiken, aanpassen en verspreiden.
Wat Netflix er zelf mee wil doen, is nog niet duidelijk. Voorlopig lijkt het vooral een onderzoeksproject.