Stability AI hat kürzlich eine bahnbrechende Videoverarbeitungstechnologie veröffentlicht, Stable Video4D. Diese Technologie kann ein Einzelansichtsvideo in Videos mit acht verschiedenen Blickwinkeln umwandeln und eröffnet so beispiellose Möglichkeiten bei der Videoerstellung. Das Aufkommen dieser Technologie markiert einen großen Wandel in der Videogenerierungstechnologie von der bildbasierten Generierung zur vollständigen dynamischen 3D-Videosynthese und eröffnet neue Entwicklungsmöglichkeiten für Bereiche wie Spieleentwicklung, Videobearbeitung und virtuelle Realität. Stable Video4D basiert auf dem früheren Stable Video Diffusion-Modell von Stability AI und verbessert es erheblich, um es in die Lage zu versetzen, komplexere Videodaten zu verarbeiten und realistischere und flüssigere Multi-View-Videos zu generieren.
Kürzlich gab Stability AI die Einführung einer revolutionären Videoverarbeitungstechnologie bekannt – Stable Video4D. Diese Technologie ist in der Lage, ein Video aus einer einzigen Perspektive in ein Video mit einer neuen Perspektive aus 8 verschiedenen Blickwinkeln umzuwandeln, was den Erstellern eine beispiellose Flexibilität und Kreativität bietet.
Stable Video4D baut auf dem zuvor eingeführten Stable Video Diffusion-Modell des Unternehmens auf. Anstatt Bilder in Videos umzuwandeln, kann das neue Modell Videoeingaben empfangen und Videoausgaben aus mehreren neuen Perspektiven generieren, wodurch ein großer Sprung von der bildbasierten Videogenerierung zur vollständigen dynamischen 3D-Videosynthese erreicht wird.
Stability AI sagte, dass sich Stable Video4D derzeit in der Forschungsphase befindet und voraussichtlich in Zukunft in Bereichen wie Spieleentwicklung, Videobearbeitung und virtueller Realität weit verbreitet sein wird. Das Unternehmen optimiert das Modell aktiv, um eine breitere Palette realer Videos verarbeiten zu können.
Stable Video4D ist jetzt auf der Hugging Face-Plattform verfügbar. Stability AI freut sich darauf, das Potenzial dieser Technologie zur Erstellung realistischer Multi-Angle-Videos durch kontinuierliche Forschung und Entwicklung weiter voranzutreiben. Das Unternehmen wird weiterhin mit Forschern, Experten und der Community zusammenarbeiten, um technologische Innovationen voranzutreiben und die Modellleistung kontinuierlich zu verbessern.
Modelladresse: https://huggingface.co/stabilityai/sv4d
Die Open-Source-Veröffentlichung von Stable Video4D wird die Weiterentwicklung der Videogenerierungstechnologie erheblich vorantreiben und ihre Anwendung in weiteren Bereichen vorantreiben. Wir freuen uns auf die zukünftige Entwicklung und Anwendung dieser Technologie, die uns ein noch spannenderes audiovisuelles Erlebnis bescheren wird.