Cuma günü araştırmacılar NVIDIA Metinsel açıklamalardan 3 boyutlu modeller oluşturabilen bir yapay zeka modeli olan Magic3D'yi duyurdu. "Nilüferin üzerinde oturan mavi zehirli ok kurbağası" gibi bir ipucu girdikten sonra Magic3D, yaklaşık 40 dakika içinde renkli dokusuyla tamamlanmış bir XNUMX boyutlu ağ modeli oluşturur. Değişikliklerle ortaya çıkan model, video oyunlarında veya CGI formatındaki sanat sahnelerinde kullanılabilir.
Bilimsel makalesinde NVIDIA Magic3D'yi Google araştırmacılarının Eylül ayında duyurduğu metinden 3D'ye dönüştürme modeli DreamFusion'a bir yanıt olarak görüyor. DreamFusion'ın daha sonra hacimsel NeRF (Sinirsel parlaklık alanı) verilerine göre optimize edilen bir 2D görüntü oluşturmak için metinden görüntüye modeli kullanması gibi, Magic3D de düşük çözünürlükte oluşturulan kaba bir modeli alıp onu optimize eden iki adımlı bir süreç kullanır. daha yüksek bir çözünürlük. Makalenin yazarlarına göre ortaya çıkan Magic3D yöntemi, DreamFusion'dan iki kat daha hızlı üç boyutlu nesneler üretebiliyor.
Magic3D, 3D kafeslerin anında düzenlemesini de gerçekleştirebilir. Düşük çözünürlüklü bir 3B model ve temel bir araç ipucuyla, ortaya çıkan modeli değiştirmek için metni değiştirebilirsiniz. Magic3D aynı zamanda birkaç nesil boyunca aynı planın korunmasını (genellikle tutarlılık olarak adlandırılan bir kavram) ve bir 2B görüntü stilinin (bir kübist resim gibi) bir 3B modele uygulanmasını da gösterir.
NVIDIA araştırma çalışmasıyla birlikte herhangi bir Magic3D kodunu yayınlamadı.
Metinden 3B oluşturma yeteneği, bir dizi veri üzerinde yoğun eğitimden sonra yeni içeriği sentezlemek için sinir ağlarını kullanan modern difüzyon modellerinde doğal bir evrim gibi görünüyor. DALL-E ve Stable Diffusion gibi güçlü metinden görüntüye modellerin yanı sıra Google ve Meta'dan temel metinden videoya oluşturucuların ortaya çıkışını 2022 yılına kadar görmedik.
Magic3D'ye gelince, arkasındaki araştırmacılar, herkesin özel eğitime ihtiyaç duymadan 3D modeller oluşturmasına izin vereceğini umuyor. Bir kez iyileştirildiğinde, ortaya çıkan teknoloji video oyunu (ve sanal gerçeklik) gelişimini hızlandırabilir ve sonunda film ve televizyon için özel efektlerde kullanım alanı bulabilir. Makalelerinin sonunda şöyle yazıyorlar: "Magic3D ile 3D sentezi demokratikleştirebileceğimizi ve herkesin 3D içerik yaratma konusundaki yaratıcı potansiyelini ortaya çıkarabileceğimizi umuyoruz."
Ukrayna'nın Rus işgalcilerine karşı savaşmasına yardım edebilirsiniz. Bunu yapmanın en iyi yolu, Ukrayna Silahlı Kuvvetlerine bağış yapmaktır. Hayat kurtarmak veya resmi sayfa aracılığıyla NBU.
Ayrıca okuyun:
- İsveç'te, mikro elektroniklerin 3D yazıcılarda nasıl yazdırılacağını öğrendiler
- Mars'ta 3D baskı için toz kullanılabilir