Yapay zeka tabanlı üretken modeller, metin açıklamalarından etkileyici 3D nesneler oluşturabiliyor ancak bu tasarımlar genellikle gerçek kullanım için uygun olmayan sadece güzel bir dış görünüşten ibaret kalıyor. Örneğin, üretilen bir fincan sanat eseri gibi görünebilir ancak sıvı tutamaz. MIT, Google ve Northeastern Üniversitesi'nden araştırmacılar, bu engeli aşan, kullanıcıların 3D modelleri yalnızca oluşturmalarına değil, aynı zamanda işlevsel hale getirmelerine olanak tanıyan InstructMesh aracını tanıttı.
InstructMesh, metin ve görsellerden 3D modeller oluşturmak için TRELLIS sistemini GPT-4 dil modeliyle birleştiriyor. Bu, kullanıcıların istedikleri değişiklikleri doğal dilde tarif etmelerini sağlıyor. Üretilen bir gözlük modelinin lensleri düzensizse, bunu belirtmek yeterli ve sistem düzeltmeler önerecektir. Sonuç olarak, ejderha şeklinde sapı olan bir fincan, deniz kabuğu şeklinde bir düdük veya kelebek kanatlı gözlükler üretildi. Dahası, araç bir karides şeklinde fonksiyonel bir "bristolbot" robotu ve hatta kot kumaşı stilinde bir dizlik oluşturmaya yardımcı oldu.
InstructMesh'in yeniliği, 3D modellemeyi profesyonel olmayanlar için erişilebilir hale getirmesidir. Denemeler, 3D tasarım deneyimi olmayan acemilerin bile modellerdeki hataları yaklaşık %90 doğrulukla tespit edip düzeltebildiğini gösterdi. Bu, artık herkesin, karmaşık programları öğrenmek zorunda kalmadan, kişiselleştirilmiş bir anahtarlık veya bir cihaz prototipi olsun, fikirlerini hayata geçirebileceği anlamına geliyor.
Geliştiriciler, InstructMesh'in geleceğini, kullanıcının kendi ortamında gerekli nesneleri oluşturup yazdırabileceği artırılmış gerçeklikle entegrasyonunda görüyor. Ayrıca, nesnenin gerçek koşullardaki davranışını tahmin etmek için fiziksel modelleme eklenmesi planlanıyor. Bu, yapay zeka üretiminin sadece bir eğlence olmaktan çıkıp yaratıcılık ve mühendislik için tam teşekküllü bir araç haline gelmesi yolunda bir adım.