Forscher von Adobe und der Australian National University haben einen Algorithmus entwickelt, der zweidimensionale Bilder in nur 5 Sekunden in dreidimensionale Modelle umwandelt. Dieser Durchbruch verspricht, die Erstellung von Inhalten in den Bereichen Design und Unterhaltung zu revolutionieren. Achten Sie jedoch auf mögliche Probleme mit verschwommenen Texturen und Urheberrechtsverletzungen.
Der neue Algorithmus namens Large Reconstruction Model (LRM) ist ein bedeutender Fortschritt bei der schnellen Erstellung dreidimensionaler Modelle auf der Grundlage eines einzelnen Bildes. Der Algorithmus, der auf einem großen Datensatz von etwa einer Million 3D-Objekten trainiert wurde, die in den Objaverse- und MVImgNet-Datenbanken verfügbar sind, zeigte eine außergewöhnliche Generalisierungsfähigkeit bei der Arbeit mit einer Vielzahl von Bildern für die Erstellung von XNUMXD-Inhalten.
Im Gegensatz zu früheren Modellen, die auf begrenzten Datensätzen trainiert wurden und sich auf eine Bildkategorie konzentrierten, verwendet LRM eine transformative Architektur mit 500 Millionen Parametern, die zur Grundlage für viele Entwicklungen im Deep Learning geworden ist. Dadurch kann das KI-Modell effektiv mit einer Vielzahl von Bildtypen arbeiten, einschließlich Fotos aus der realen Welt und visuellen Collagen, die von anderen KI-Diensten wie DALL-E und Stable Diffusion erstellt wurden.
Yitzong Hong, Hauptautor der Studie, betonte, dass LRM einen bedeutenden Durchbruch auf dem Gebiet der XNUMXD-Rekonstruktion darstellt. Der Algorithmus ist in der Lage, detaillierte Geometrie und komplexe Texturen, beispielsweise die Textur von Holz, unter Beibehaltung von Qualität und Genauigkeit zu reproduzieren.
Die Anwendung von LRM kann wirklich enorm sein, von Design und Unterhaltung bis hin zur Spieleindustrie. Für Designer und 3D-Künstler bedeutet dies, den Prozess der Modellerstellung zu beschleunigen, was besonders bei der Entwicklung von Videospielen und Animationen wichtig ist. Darüber hinaus verspricht die Möglichkeit, LRM durch normale Benutzer zu nutzen, die 3D-Modellierung nicht nur für Profis zu einem Vorrecht zu machen. Jetzt wird es möglich sein, auch aus Fotos, die mit dem Smartphone aufgenommen wurden, detaillierte Modelle zu erstellen.
Allerdings hat LRM seine Einschränkungen, wie z. B. die Unschärfe von Texturen in verborgenen Bereichen des Bildes. Insbesondere im Zusammenhang mit der Nutzung von Bildern, die von anderen KI-Diensten erstellt wurden, lohnt es sich auch, urheberrechtliche Fragen zu berücksichtigen. Um die Fähigkeiten von LRM zu demonstrieren, haben Adobe-Forscher erstellt Seite mit Videodemonstrationen und interaktiven 3D-Modellen. Dies unterstreicht die wachsende Rolle der KI in der heutigen Welt und ihre potenziellen Auswirkungen auf die Zukunft der Kreativbranche.
Lesen Sie auch: