Tekst kan nu worden omgezet in een video. AI heeft dit geleerd van duizenden uren opname

Een team van machine learning-ingenieurs van Facebook's moederbedrijf Meta (geïdentificeerd als extremistisch)

organisatie waarvoor activiteiten verboden zijngrondgebied van de Russische Federatie) introduceerde een nieuw systeem genaamd Make-A-Video. Zoals de naam al doet vermoeden, maakt dit AI-model video's. Het werkt eenvoudig: de gebruiker voert een ruwe beschrijving van de scène in en het systeem genereert een korte video die overeenkomt met de tekst.

"teddybeer tekent een portret"

In een bericht waarin Make-a-Video wordt aangekondigd, heeft het bedrijfmerkt op dat tools voor het maken van video's van onschatbare waarde zijn "voor makers van inhoud en artiesten." Maar net als bij tekst-naar-beeld-modellen zijn er verontrustende vooruitzichten. De resultaten van deze instrumenten kunnen worden gebruikt voor desinformatie en propaganda.

Linksboven:een hond in een superheldencape vliegt door de lucht. Rechtsboven: Het ruimtevaartuig landt op Mars. Linksonder: Het penseel van de kunstenaar schildert een close-up van het doek, tot in detail. Rechtsonder: een paard dat water drinkt.

In een document waarin de technische details worden beschrevenmodellen vertellen de auteurs van de ontwikkeling hoe het werkt. Make-A-Video is getraind in combinaties van afbeeldingsbijschriften en ongelabelde videobeelden. De trainingsinhoud werd verkregen uit twee datasets (WebVid-10M en HD-VILA-100M). Ze bevatten miljoenen video's met honderdduizenden uren aan beeldmateriaal. Er zijn ook stockvideo's gemaakt door sites als Shutterstock en willekeurige video's van internet.

Tot nu toe levert Make-A-Video 16 videoframes met een resolutie van 64 bij 64 pixels, die vervolgens met een afzonderlijk AI-model worden opgeschaald naar 768 bij 768.

Lees verder:

Het bleek wat er met het menselijk brein gebeurt na een uur in het bos

Het werd bekend welke thee eiwitten in de hersenen vernietigt

Vreemde zeedieren in de diepten van de oceaan bleken op mensen te lijken