Apple ontwikkelt een hulpmiddel voor kunstmatige intelligentie om afbeeldingen te animeren met behulp van tekstprompts

Onderzoekers bij Apple hebben Keyframer onthuld, een prototype van een AI-aangedreven animatietool waarmee gebruikers beweging aan 2D-beelden kunnen toevoegen door te beschrijven hoe ze moeten worden verplaatst.

in Onderzoekspaper gepubliceerd op 8 februariApple zei dat grote taalmodellen (LLM's) op het gebied van animatie “onderontwikkeld” zijn, ondanks het potentieel dat ze hebben getoond in andere creatieve media, zoals schrijven en het genereren van afbeeldingen. De door LLM aangedreven Keyframer-tool wordt getoond als een voorbeeld van hoe de technologie kan worden toegepast.

Met OpenAI's GPT4 als basismodel kan Keyframer SVG-bestanden (Scalable Vector Graphic) gebruiken – een illustratieformaat waarvan het formaat kan worden aangepast zonder dat dit ten koste gaat van de kwaliteit – en CSS-code genereren om de afbeelding te animeren op basis van een tekstprompt. Upload eenvoudigweg uw foto, typ iets als 'Laat de sterren schitteren' in het promptvenster en druk op Maken. Voorbeelden in het onderzoeksartikel laten zien hoe een tekening van Saturnus kan overgaan tussen achtergrondkleuren, of hoe sterren naar de voorgrond vervagen.

Gebruikers kunnen meerdere animatieontwerpen tegelijk maken en eigenschappen zoals kleurcodes en animatieduur in een apart venster aanpassen. Er is geen programmeerervaring nodig omdat Keyframer deze wijzigingen automatisch omzet naar CSS, hoewel de code zelf ook volledig bewerkbaar is. Deze op beschrijvingen gebaseerde aanpak is veel eenvoudiger dan andere vormen van door AI gegenereerde animatie, waarvoor doorgaans veel verschillende toepassingen en enige programmeerervaring nodig zijn.

“Een deel van mij maakt zich zorgen dat deze tools de functionaliteit gaan vervangen, omdat het potentieel zo groot is”, zegt een professionele bewegingsontwerper die aan het onderzoek van Apple heeft deelgenomen. “Maar ik denk dat het herkennen ervan en het gebruiken ervan als animatie gewoon een hulpmiddel in onze gereedschapskist is. “Onze vaardigheden. Het zijn echt spannende dingen.”

Er is echter nog een lange weg te gaan. Keyframer is nog niet beschikbaar voor het publiek, en het gebruikersonderzoek in het onderzoeksrapport van Apple bestond uit slechts 13 mensen, die bij het uitproberen van de tool slechts twee eenvoudige, vooraf gedefinieerde SVG-afbeeldingen konden gebruiken.

Apple was ook voorzichtig met het vermelden van de beperkingen ervan in het artikel, waarbij werd gespecificeerd dat Keyframer zich richt op webgebaseerde animaties, zoals laadreeksen, datavisualisatie en geanimeerde overgangen. Het type animatie dat je in films en videogames ziet, is daarentegen te complex om te worden geproduceerd met alleen beschrijvingen – althans voorlopig.

Keyframer is een van de vele AI-innovaties die Apple de afgelopen maanden heeft aangekondigd. In december diende het bedrijf een aanvraag in Menselijke Gaussiaanse vlekken (HUGS), waarmee animatieklare menselijke avatars uit video's kunnen worden gemaakt. Vorige week bracht Apple ook MGIE uit, een nieuw AI-model dat afbeeldingen kan bewerken met behulp van tekstbeschrijvingen.