DreamCraft3D 2D

Aus 2D wird 3D

Der AI Image-Generator von DreamCraft3D erzeugt 3D-Bilder aus 2D-Aufnahmen. Die Entwickler nennen es eine „hierarchische Methode zur Generierung von 3D-Inhalten, die 3D-Objekte mit hoher Wiedergabetreue erzeugt“. KI-generierte Bilder sind von echten Aufnahmen kaum noch zu unterscheiden. Somit könnten man diese Technologie möglicherweise dazu nutzen, nicht nur aus von Menschenhand aufgenommenen Fotos 3D-Bilder zu erstellen. Auch bereits AI generierte Bilder könnte man so in 3D-Aufnahmen umwandeln.

AI von DreamCraft3D sorgt für die fehlenden 3D-Daten

Mittels AI-Technologie versucht man, das Problem der Inkonsistenz der aufgenommen 2D-Objekte zu lösen. DreamCraft3D ist möglicherweise der bisher beste Versuch, dieses Problem zu beheben.

DreamCraft3d nutzt dazu ein 2D-Referenzbild, um die Phasen der Geometrieformung und Texturverstärkung zu steuern.

Die KI trainiert ein personalisiertes Diffusionsmodell namens Dreambooth, auf den erweiterten Renderings der Szene und füllt es mit 3D-Wissen über die zu optimierende Szene.

Weitere Informationen zum generativen KI-Modell von DreamCraft3D finden man auf GitHub.

 

 

Image Credit / Bildquelle: DreamCraft3D