De 1e video AI's tests: ik heb er diversen getest en dit zijn daarvan de meest interessante (so far)
Stel je voor: je bent in een levendige kroeg en je vertelt je vrienden een verhaal. Je gebaren en gezichtsuitdrukkingen versterken je woorden en brengen het verhaal tot leven. Maar wat gebeurt er als je hetzelfde verhaal op papier zou moeten zetten of op een andere manier over wilt brengen? Je mist de visuele elementen die je verhaal kracht bijzetten.
Een van mijn grootste leerpunten aan het begin van mijn carrière was dat je niet hetzelfde verhaal op dezelfde manier aan andere mensen kan brengen. Iedereen heeft zijn of haar eigen manier waarop dat het beste overkomt. Voor bepaalde doelgroepen is dat misschien wel met video. En zelfs als je het met video doet is de ene video de andere niet.
zo kijkt de ene persoon misschien liever naar
terwijl dezelfde boodschap misschien op een ander beter overkomt als die zo gebracht wordt
Of misschien wil je wel liever een personage die helemaal niet op de real deal lijkt of een personage die wel lijkt maar met een andere tekst.
Ik heb het bij de afbeelding genererende AI al gehad over enkele dilemma’s rondom AI dus die laat ik hier achterwege. Maar je kan je indenken dat naast voordelen hier ook nadelen aan zitten. Maar laten we die uitdagingen aangaan en samen een toekomst creëren waarin technologie onze waarden weerspiegelt en versterkt.
Door naar de generatoren die ik getest heb voor mijn AI consultancy- en trainingen. Degene waar ik een prompt in kon geven heb ik elk een vergelijkbare aanwijzing (prompt) gegeven heb, namelijk "Colorful fish like clownfish, Zebrasoma flavescens, red bettas, red discus, Purple Dottyback, floating in the ocean". Ik heb de filmpjes toegevoegd, zodat jullie kunnen meegenieten en zelf kunnen oordelen.
Er zijn echter ook andere Video AI’s dan die gebaseerd op prompts. Daar is de prompt dus niet van toepassing maar die werken op een andere manier.
Waarom video?
Bewegend beeld trekt de aandacht, kijk maar eens naar hoe snel kleine kinderen gebiologeerd zijn door een schermpje met bewegende beelden. Zo zelfs dat ze ons vaak heel prettig ondersteunen bij het opvoeden omdat we ze rustig kunnen houden door ze wat filmpjes te laten kijken.
Hoewel het maken en bewerken van film de afgelopen jaren almaar eenvoudiger is geworden, een go pro neem je tenslotte zo mee onderwater, mee op je mountainbike of waar dan ook en je hebt een hoog resolutie filmpje. Moest je nog wel specifiek op zoek naar de juiste omgeving, wachten op het juiste moment, zorgen dat je misschien de juiste attributen en mensen etc. op de juiste plek had. Kortom je moet nog behoorlijk wat regelen voor een goed aangeklede film.
Maar daar is een oplossing voor, en raad eens wat ons daarbij een handje helpt? Precies, ook hier komt AI om de hoek kijken! Ik heb er voor mijn AI trainingen in Prompting en inzet van AI (zie o.a. hierboven) een paar uitgeprobeerd en net als met afbeeldingen zijn ook deze behoorlijk indrukwekkend.
De 1e video AI tests van 2023
Runway Gen-2
De absolute topper onder de AI-video generators van dit moment is Runway Gen-2! Eerder bracht Runway al de baanbrekende Gen-1 uit, waarmee je video-naar-video generatie kon realiseren. De Gen-1 heb ik dan ook gebruikt voor het fragment hierboven. Maar met het gloednieuwe Gen-2 model, kun je video's genereren vanaf nul met behulp van tekst prompts. Geniaal.
Stel je voor, je kunt gewoon de scène en camerahoeken beschrijven, en voilà, Runway creëert verbluffende beelden. Ik heb het zelf uitgetest en moet zeggen dat het in kwaliteit zeker niet teleurstelt. Maar dat is nog niet alles, want je kunt zelfs afbeeldingen toevoegen aan je prompts, en Runway verwerkt ze naadloos in de video. Hoe cool is dat?
En het mooiste van alles is dat het deels gratis is om te gebruiken. Je kunt tot 4 seconden video's genereren in 720p resolutie en je krijgt de mogelijkheid om enkele gratis video's en/of projecten te maken.
Wil je nog meer? Nou, als je kiest voor het betaalde abonnement van slechts $12 per maand, kun je jouw meesterwerken exporteren in 4K. De enige kanttekening is dat de duur van de video nog steeds 4 seconden blijft. Maar geloof me, het is absoluut de moeite waard!
Voordelen:
Hoge kwaliteit beeld (tot 4k bij betaald)
4 seconden aan video
Opties zoals het toevoegen van eigen afbeeldingen voor de video
Gen-1 doet video naar video, je kan dus je eigen korte animatie maken.
Nadelen:
Slechts beperkt gratis te testen
Beperkt aantal seconden zelfs met betaalde versie
Probeer Runway Gen-2 zelf: https://runwayml.com/ai-magic-tools/gen-2/
ModelScope
Het volgende model waarmee ik aan de slag ben gegaan is ModelScope. Het is een mooi tekst-naar-video model dat gefinancierd wordt door Alibaba's DAMO Vision Intelligence Lab. Dit model is net als veel anderen ook een stuk beter geworden na verloop van tijd! Een indrukwekkende model is gebouwd op het diffusion model en getraind met maar liefst 1,7 miljard parameters.
Op het moment van schrijven ondersteunt ModelScope alleen Engelse invoer, maar ook deze maakt best aardige korte video's genereren die proberen aan te sluiten bij de tekst die je invoert.
En het beste nieuws is dat je er zelf ook gratis mee aan de slag kunt want het project is beschikbaar op Hugging Face. Je kunt het gebruiken om korte AI-’video's’ te genereren. Er is echter één ding om in gedachten te houden: de gegenereerde ‘video's’ zijn beperkt tot slechts 2 seconden en er staat een "Shutterstock" watermerk op de video.
Ik heb het model zelf uitgeprobeerd en moet zeggen dat het nog in ontwikkeling lijkt te zijn. Maar we weten allemaal dat geweldige dingen tijd en inspanning vergen. Dus ModelScope is zeker een model om te blijven volgen en te zien hoe het zich ontwikkelt in de toekomst. Wie weet welke spannende mogelijkheden het ons gaat bieden!
Voordelen:
Gratis
Op basis van een prompt dus niets anders nodig dan een goede omschrijving
Nadelen:
Watermerk
Prompt volledig goed laten interpreteren is mij nog niet gelukt
Slechts 2 seconden ‘video’
Prompten alleen in Engels
redelijk traag
Ontdek zelf de potentie van ModelScope: https://huggingface.co/spaces/damo-vilab/modelscope-text-to-video-synthesis
ZeroScope
Er is nog een ander tekst-naar-video model dat is afgeleid van ModelScope dat ik hierboven beschreef en dat is Zeroscope. Dit model is in tegenstelling tot ModelScope in staat om hoogwaardigere AI-video's te creëren in een resolutie van 1024 x 576. Het is getraind met behulp van het oorspronkelijke gewicht van ModelScope, samen met 9.923 videoclips en 29.769 getagde frames met een snelheid van 24 frames per seconde (1024 x 576 resolutie). Je krijgt hier dus iets betere resultaten op dan ModelScope.
Er zijn twee modellen van Zeroscope beschikbaar: zeroscope_v2_576w en zeroscope_v2_XL. Het zeroscope_v2_576w model wordt gebruikt voor het genereren van de video's en zeroscope_v2_XL wordt gebruikt om de gegenereerde inhoud op een hogere resolutie te vergroten. De duur van op tekst gegenereerde video’s is behoorlijk kort maar ZeroScope heeft heer nog een ander voordeel ten opzichte van ModelScope en dat is dat je 3 in plaats van 2 seconden aan video hebt en bij het downloaden zag ik het shutterstock logo niet.
Ben je dus blij met ModelScope dan is ZeroScope zeker de moeite van het proberen waard. Met zijn vermogen om video's te genereren in een resolutie van 1024 x 576, brengt het je visie tot leven op een hoger kwaliteitsniveau.
Voordelen:
Gratis
Hogere kwaliteit dan ModelScope
3 ipv 2 seconden t.o.v. ModelScope
Op basis van een prompt dus niets anders nodig dan een goede omschrijving
Nadelen:
Slechts 3 seconden ‘video’
Prompten alleen in Engels
Traag
Het is mij nog niet gelukt een prompt helemaal goed te laten interpreteren
Geniet van het avontuur en ontdek zelf de kracht van Zeroscope: https://huggingface.co/spaces/fffiloni/zeroscope
Pictory
Pictory is een AI-video generator waarmee je gemakkelijk video's zoals instructie videos maakt. Een van de beste aspecten van deze tool is dat je geen ervaring nodig hebt op het gebied van videobewerking of design.
Je begint heel eenvoudig door een script of artikel te leveren (dat kan je weer met een andere AI genereren natuurlijk). Vervolgens dient als basis voor je videomateriaal. Pictory kan bijvoorbeeld je blogpost omzetten in een boeiende video die gebruikt kan worden op sociale media of op je website. Dit is een leuke functie voor bloggers en bedrijven die de betrokkenheid en kwaliteit willen vergroten.
Pictory maakt het ook eenvoudig om video's te bewerken met behulp van tekst. Dat zou ideaal kunnen zijn voor bijvoorbeeld een webinar, podcast, Zoom-opnames en meer.
Een andere mooie functie van Pictory is dat je de mogelijkheid hebt om deelbare videohighlight-reels te maken. Een optie die mij handig lijkt voor mensen die trailers willen maken of korte clips willen delen op sociale media. Ik maakte als test in een paar minuten de volgende instructie video over AI Promting voor Video AIs. Sorry alvast voor eventuele foutjes het was een heel snelle test.
Voordelen:
Gratis uit te proberen
Werkt volledig in de cloud
Gaat snel
Weinig ervaring nodig
Kan er lange videos mee maken
Nadelen:
Watermerk in gratis exemplaar
Uitgebreid gebruik en verwijderen van watermerk zal je voor moeten betalen
Pictory is dus een krachtige tool waarmee je zonder enige ervaring op een eenvoudige manier hoogwaardige video's kunt maken en bewerken. Het helpt je om je publiek te laten groeien en je merk te versterken.
Probeer de online demo van Pictory hier: https://app.pictory.ai/
Deep Brain AI
Maak kennis met mogelijkheden van de Deepbrain AI-tool! Met deze tool kun je snel en eenvoudig een video maken met behulp van tekst. Het enige wat je hoeft te doen, is een korte regel script te schrijven en de Text-to-Speech functie gebruiken om binnen 5 minuten of zelfs minder je eerste AI- promo of instructie video te realiseren.
Het is absoluut een tool die je veel tijd kan besparen bij het maken van een promo video, een instructievideo en meer. Je kan een PowerPoint importeren waar je dan bijvoorbeeld audio bij kan krijgen krijgt of je kan werken met diverse standaard templates. Ook is er een integratie met Chat GPT.
Voor mijn test heb ik gebruik gemaakt van de standaard templates met een AI avatar was ik al snel onderweg want de tool voelt intuïtief en kan daarom aanzienlijk tijd besparen voor korte filmpjes. Oordeel zelf
Voordelen:
Gratis uit te proberen
Werkt volledig in de cloud
Gaat behoorlijk snel
Weinig ervaring nodig
Nadelen:
Reclame voor het deepbrain in gratis exemplaar
Maximaal 1 minuut
Nederlandse spraak klinkt (net als met veel spraak AIs) nog niet lekker
Spraak en video lopen niet lekker synchroon
Er is, zoals je video ziet, nog voldoende ruimte voor verbetering, net als met veel van de eerder besproken tools. Toch is het naar mijn mening, zeker voor bijvoorbeeld een instructie video een tool die voldoende mogelijkheden geeft. Ga nu aan de slag en ontdek de mogelijkheden van de Deepbrain AI-tool.
Probeer deepbrain hier gratis: https://www.deepbrain.io/
Er zijn nog diverse andere AIs voor video creatie maar ik heb ze nog niet allemaal onder de loep kunnen nemen. Weet je andere AI video creaters (die hopelijk nog beter zijn) of wil je graag andere AIs getest zien laat dan wat weten via de comments en wie weet gaat daar de volgende post over.
Deel deze post op je social en help je collega’s, vrienden en kennissen
Blijf experimenteren en ontdek de eindeloze mogelijkheden van deze video creators. Het zijn mooie toevoegingen aan de wereld van tekst-naar-video AI-modellen, die je niet wilt missen!
Wil je weten wat ik allemaal nog ontdek? abonneer je dan voor toekomstige nieuwsbrieven