Das neueste KI-Modell von Stability AI, Stable Zero123, kann hochwertige 3D-Objektansichten auf der Grundlage eines einzelnen Bildes generieren und übertrifft in seiner Leistung das Vorgängermodell Zero123-XL deutlich. Die Verbesserung dieses Modells spiegelt sich hauptsächlich in drei Aspekten wider: optimierter Trainingsdatensatz, innovative „Erhöhte Bedingungen“-Technologie und ein 40-mal effizienterer Trainingsprozess. Stable Zero123 wurde auf der Hugging Face-Plattform veröffentlicht und bietet zwei Lizenzmodelle: Forschungsversion und kommerzielle Version, was neue Möglichkeiten im Bereich der 3D-Objektgenerierung eröffnet. In diesem Artikel werden die Kerntechnologie und die Anwendungsaussichten von Stable Zero123 ausführlich erläutert.
Stability AI hat ein neues KI-Modell namens Stable Zero123 veröffentlicht, das aus einem einzigen Bild hochwertige 3D-Objektansichten generieren kann. Der stabile Zero123 übertrifft seinen Vorgänger Zero123-XL bei den erzielten Ergebnissen dank dreier Schlüsselinnovationen deutlich.
Stable Zero123 verwendet einen streng ausgewählten Trainingsdatensatz aus dem Objaverse, der speziell hochwertige 3D-Objekte speichert. Diese Verbesserung sorgt dafür, dass die generierten 3D-Objekte realistischer sind.
Während des Trainings- und Inferenzprozesses des Modells verwendet Stable Zero123 den geschätzten Kamerawinkel zur „Höhenkonditionierung“. Diese Technologie ermöglicht dem Modell genauere Vorhersagen und verbessert die Qualität der generierten Bilder erheblich. Stable Zero123 führt außerdem einen vorberechneten Datensatz und einen verbesserten Datenlader ein, wodurch das Training 40-mal effizienter wird.
Stable Zero123 ist derzeit auf Hugging Face für Forscher und nichtkommerzielle Benutzer zum Herunterladen und Experimentieren veröffentlicht. Es ist zu beachten, dass die Verwendung dieses Modells bestimmten Genehmigungsbeschränkungen unterliegt und in zwei Versionen unterteilt ist: Stable Zero123 und Stable Zero123C. Ersteres enthält einige CC-BY-NC-autorisierte 3D-Objekte und kann nur für Forschungszwecke verwendet werden; letzteres verwendet nur CC-BY- und CC0-autorisierte Objekte, sodass Benutzer mit Stability AI-Mitgliedschaft diese kommerziell nutzen können.
Darüber hinaus ist Stable Zero123 auch in den Open-Source-Code threestudio integriert, um Open-Source-Forschung zur 3D-Objektgenerierung zu unterstützen. Derzeit befindet sich die zugehörige vereinfachte Version des Stable3D-Prozesses in der privaten Vorschau. Mit diesem Ansatz können Benutzer Score Distillation Sampling (SDS) nutzen, um neuronale Strahlungsfelder (NeRF) zu optimieren und aus Bildern, die mit dem Stable Zero123-Modell generiert wurden, reich strukturierte 3D-Modelle zu erstellen.
Die Veröffentlichung von Stable Zero123 bringt nicht nur bedeutende technologische Fortschritte im Bereich der 3D-Objektgenerierung, sondern bietet auch neue Möglichkeiten für Forschung und kommerzielle Anwendungen.
Offizieller Blog: https://stability.ai/news/stable-zero123-3d-generation
Highlight:
Stabiler Zero123 kann hochwertige 3D-Objektansichten basierend auf einem einzelnen Bild generieren und so den Generierungseffekt erheblich verbessern.
Das Modell ermöglicht eine genauere Bilderzeugung durch verbesserte Datensätze und verbesserte Konditionierungstechniken.
Stable Zero123 ist in eine Forschungsversion und eine kommerzielle Version unterteilt. Letztere erfordert eine Mitgliedschaft bei Stability AI.
Das Aufkommen von Stable Zero123 markiert einen bedeutenden Sprung in der 3D-Modellgenerierungstechnologie. Sein effizienter Trainingsprozess und seine hochwertigen Generierungseffekte bieten die Möglichkeit für weitere Anwendungsszenarien in der Zukunft. Es lohnt sich, auf seine weitere Entwicklung und Anwendung in verschiedenen Bereichen zu blicken .