Apple toont details Keyframer-AI voor animeren stilstaande beelden met prompts

Apple-onderzoekers hebben details over een prototype animatietool met de naam Keyframer gedeeld. De AI-tool moet CSS-animatiecode op basis van tekstprompts genereren om statische SVG-afbeeldingen tot leven te wekken. Er staat nog geen officiële release gepland.

In het onderzoek maakten de Apple-onderzoekers gebruik van een large language model op basis van GPT-4. Gebruikers kunnen met Keyframer afbeeldingen met SVG-formaat uploaden, waarna de tool op basis van prompts CSS-code genereert. De tool kan op basis van vervolgprompts de code aanpassen of de gebruiker kan handmatig binnen Keyframer code aanpassen. Op deze manier willen de onderzoekers naar eigen zeggen het proces van het animeren van afbeeldingen stroomlijnen.

Uit tests bleek dat gebruikers twee algemene soorten prompts probeerden te gebruiken. In een derde van alle gevallen gaven ze zeer specifieke prompts met animatiejargon zoals 'opacity', 'scale' en 'rotate'. In de overige gevallen gaven ze 'semantische prompts', ofwel beschrijvende opdrachten in spreektaal met betrekking tot bewegingen, timing, en de plaatsing van en relatie tussen elementen. In dat laatste geval hebben de onderzoekers de meer abstracte beschrijvingen gecategoriseerd. In de meeste gevallen had een semantische prompt betrekking op de beweging van een element.

Eind januari onthulde Google Lumiere, een generatieve AI die op de eerste plaats gericht is op het genereren van korte filmpjes. Volgens de techgigant kan Lumiere echter ook bestaande afbeeldingen animeren. Lumiere bevindt zich momenteel nog in de prototypefase.

Reacties (16)

[Beta]

Gaan we terug naar een tijdperk vol met .gifjes?

[Zwarte_os]

Dit gaat om Svg animaties mbv css, een heel andere techniek die geen gebruik maakt van pixels maar vectoren. Dit maakt de illustraties kleiner qua bestandsgrootte en schaalbaar. Het leunt daarentegen wel weer zwaarder op je processor.

[Skywalker27]

Dat is bij M3 geen probleem

[kiang]

Een svg kunnen renderen is niet echt een flex

[voxl_]

M*, daarentegen, is op zich al een flex van Apple.

[satoer]

Grappig ,was het niet Apple die destijds de nek om heeft gedraaid van de grote vectoranimatie plugin "Flash"

[Jantimon]

Ja dat klopt, die ironie ontgaat mij ook niet. Hoewel Flash wel meer was dan alleen een animatie programma. Er zat ook een script taaltje in, waarmee games en hele websites van functionaliteit werden voorzien. Uiteindelijk was het zo lek als een mandje en een aanvals vector (pun intended) voor hackers.

[Backspin]

Flash was wel iets meer dan vectoranimatie. En Apple heeft het 'de nek omgedraaid' omdat het geen open standaard was, en ze er dus geen controle over hadden. En nogal resource-intensief en daar zat Apple ook niet op te wachten bij z'n net geïntroduceerde iPhone.
Later bleek het ook nog eens vol enorme beveilgingsgaten te zitten dus blij dat we van Flash af zijn.
De 'open letter' die Steve Jobs hier toen over schreef is hier nog te lezen: https://www.cnet.com/cult...ng-apples-flash-distaste/

[Donstil]

Gaan we terug naar een tijdperk vol met .gifjes?

Zijn Gifjes ooit weg geweest dan?
Ik gebruik nog heel veel gifjes en zie dat om mij heen en bijvoorbeeld Reddit ook nog erg veel.

[Botmeister]

Hier kun je ze 'allemaal' vinden https://gifcities.org (archive.org project)

[JustFogMaxi]

Dat zijn gewoon mp4 files...

[ultimasnake]

Gifjes, of eigenlijk korte animaties zijn nooit weggeweest volgens mij. Tegenwoordig is alles haast Webm maar de essentie blijft hetzelfde en wordt veelvuldig ingezet als respons op berichten (gif keyboards zijn niets voor niets nog steeds rete populair)

[Bonthouse]

Dit gaat juist meer de richting op van de bewegende schilderijen en foto's uit Harry Potter

[iqcgubon]

glitterplaatjes!

Fijne woensdag gewenst allemaal

[DigitalExorcist]

Dansende_banaan.gif

[Bergundy]

Ik denk dat zeker Apple een interessante partij is om in de gaten te houden omtrent onderzoek naar LLM user interaction. Het paper werpt in ieder geval een (voor mij) frisse blik.