Netflix stellt Go-with-the-Flow vor: KI-gesteuerte Videogenerierung mit präziser Bewegungskontrolle
Netflix‘ Eyeline Studios hat eine neue Technologie für die KI-gestützte Videogenerierung vorgestellt. Go-with-the-Flow ermöglicht erstmals eine präzise Kontrolle über Bewegungen in generierten Videos, ohne dabei die zugrundeliegende KI-Architektur zu verändern.
Der innovative Ansatz liegt in der Behandlung des Rauschens, das für die KI-Generierung benötigt wird. Statt zufälliges Rauschen zu verwenden, verzerrt das System dieses entsprechend der gewünschten Bewegungen. Das ermöglicht nicht nur die präzise Steuerung einzelner Objekte, sondern auch realistische Kamerafahrten und die Übertragung von Bewegungen aus existierenden Videos.
Besonders beeindruckend ist die Effizienz: Der neue Algorithmus arbeitet in Echtzeit und ist deutlich schneller als bisherige Lösungen. Die Technologie lässt sich nahtlos in bestehende Video-Diffusion-Modelle integrieren. Ein besonderer Clou ist die Möglichkeit, die Intensität der Bewegungen auch nachträglich anzupassen.
Die Ergebnisse sprechen für sich: In Nutzerstudien erreichte Go-with-the-Flow eine Zustimmungsrate von 82% bei lokaler Objektsteuerung und sogar 90% bei Kamerabewegungen – weit mehr als die Konkurrenz. Netflix stellt die Technologie als Open Source bei GitHub zur Verfügung.
Transparenz: In diesem Artikel sind Partnerlinks enthalten. Durch einen Klick darauf gelangt ihr direkt zum Anbieter. Solltet ihr euch dort für einen Kauf entscheiden, erhalten wir eine kleine Provision. Für euch ändert sich am Preis nichts. Partnerlinks haben keinerlei Einfluss auf unsere Berichterstattung.
Diese etwicklungen sofort einstellen, das führt nur zu Preiserhöhungen! :p
Eine beeindruckende Menge an Positionen die man damit in Kombination mit anderen Modellen obsolet macht.
Schauspieler, Autoren, sämtliche Leute die im Hintergrund am Bühnenbild arbeiten…schon klasse diese Technologie.