Die Erstellung von Inhalten mit KI-Technologie hat im letzten Jahr große Fortschritte gemacht. Mit nur Textbeschreibungen konnten viele Menschen mit einigen beliebten Tools wie DALL-E 2, Midjourney und Stable Diffusion Milliarden realistischer und nahezu atemberaubender Bilder erstellen.
Neue Forschungen und Fortschritte haben nun zur Entstehung von Werkzeugen geführt, die Bilder in Kurzvideos und Animationen umwandeln können.
Bild-zu-Animations-KI-Generatoren sind auf dem Vormarsch
Die KI-Forschungsgruppe des chinesischen Technologieriesen Alibaba hat kürzlich ein KI-Modell vorgestellt, das aus Standbildern „konsistente und kontrollierbare Charakteranimationsergebnisse“ erzeugen kann. Das Modell mit dem Namen „Animate Everyone“ wäre in der Lage, kurze Videoinhalte aus Bildern zu erstellen, im Grunde ein Bildgenerator für Animationen.
Das Team beschrieb Animate Everyone als „ein Charakteranimations-Framework, das Fotos in Videos umwandeln kann, die durch gewünschte Posensequenzen gesteuert werden und zeitliche Kontinuität erreichen.“ In der Forschungsarbeit sagten die Entwickler, dass das Modell anhand eines internen Datensatzes von Videoclips mit 5K-Zeichen trainiert wird.
Obwohl sich Animate Everyone noch in der Entwicklung befindet, wurden damit bereits eine Reihe beeindruckender Animationen erstellt, die im Internet viel Aufmerksamkeit erregt haben. In einem offiziellen Update, das auf Github veröffentlicht wurde, gab das Team bekannt, dass großes Interesse und Anfragen hinsichtlich einer Demo oder eines Quellcodes bestanden.
„Wir haben viele Anfragen bezüglich einer Demo oder eines Quellcodes erhalten. „Wir möchten Ihnen versichern, dass wir aktiv an der Vorbereitung der Demo und des Codes für die öffentliche Veröffentlichung arbeiten“, schrieb das Team. „Obwohl wir uns derzeit nicht auf ein bestimmtes Veröffentlichungsdatum festlegen können, stellen Sie bitte sicher, dass die Absicht, den Zugriff zu gewähren, auf die Demo, dass unser Quellcode gestoppt ist.
Alibabas Animate Everyone verbessert realistische Ergebnisse
Animate Everyone hebt sich von anderen Animationstools wie AnimateDiff und Warpfusion durch seine Fähigkeit ab, realistische, nicht unterscheidbare Ergebnisse zu erzielen.
Das Team weist darauf hin, dass Animate Everyone die räumliche und zeitliche Konsistenz des Erscheinungsbilds von Videocharakteren effektiv aufrechterhalten, jedes Charakterbild in einem Video animieren und nahtlos hochauflösende Videos produzieren kann – Funktionen, die einigen vorhandenen Tools fehlen.
Das Veröffentlichungsdatum für Animate Everyone wurde nicht angegeben, aber das Team gab an, dass das Ziel darin besteht, „sicherzustellen, dass es robust und benutzerfreundlich ist und es von einem akademischen Prototyp in eine verfeinerte Version umzuwandeln“.