Google VideoPoet: KI für Text-to-Video und mehr vorgestellt

Im Bereich der künstlichen Intelligenz hat sich in den vergangenen 12 Monaten Einiges getan. Von wirklich schlechten Ergebnissen ist man mit Midjourney v6 und DALL-E 3 mittlerweile bei einer fotorealistischen Qualität angekommen. Doch nicht nur im Standbild tut sich etwas. Es gibt auch gute große Sprachmodelle zur Erzeugung von Videos basierend auf Text-Eingaben – RunwayML ist ein Beispiel dafür.

Aber auch Google hat mit VideoPoet nun eine derartige KI vorgestellt. Das Sprachmodell ist in der Lage aus Standbildern, bewegte Bilder zu machen, Videos basierend auf eurer Eingabe zu erstellen, Video Inpainting zu realisieren und mehr.

Video Inpainting heißt, ihr könnt ein bestehendes Video nutzen und dort per Eingabe bestimmte Dinge hinzufügen.

Google beschreibt die Funktionsweise und die wissenschaftlichen Hintergründe in seinem Research Blog, auch ein Paper gibt es dazu.

Auf der Seite von VideoPoet findet ihr einige wirklich sehenswerte Beispiele. Google hat das Ganze noch nicht für die Öffentlichkeit freigegeben.

Transparenz: In diesem Artikel sind Partnerlinks enthalten. Durch einen Klick darauf ge­lan­gt ihr direkt zum Anbieter. Solltet ihr euch dort für einen Kauf entscheiden, erhalten wir ei­ne kleine Provision. Für euch ändert sich am Preis nichts. Partnerlinks haben keinerlei Einfluss auf unsere Berichterstattung.