Un grup de cercetători de la Universitatea Națională Australiană, Universitatea Oxford și Academia de Inteligență Artificială din Beijing au dezvoltat un nou sistem AI numit „3D-GPT” care poate genera modele 3D pur și simplu din descrieri text furnizate de către utilizator.
Sistemul, descris într-o lucrare publicată pe arXiv, oferă o modalitate mai eficientă și mai intuitivă de a crea elemente 3D în comparație cu metodele de lucru (workflow-ul) tradiționale de modelare 3D.
3D-GPT este capabil să „disece sarcinile procedurale de modelare 3D în segmente accesibile și să stabilească agentul potrivit pentru fiecare sarcină”, potrivit lucrării. Acesta utilizează mai mulți agenți AI care se concentrează fiecare pe o parte diferită a înțelegerii prompt-ului / descrierii text și a executării funcțiilor de modelare.
3D-GPT – rezultate promițătoare
Sistemul a fost testat pe descrieri precum „o dimineață de primăvară cețoasă, în care flori sărutate de rouă punctează o pajiște luxuriantă înconjurată de copaci înmuguriți”. 3D-GPT a fost capabil să genereze scene 3D complete cu grafică realistă care reflectă cu acuratețe elementele descrise în text.
Deși calitatea graficii nu este încă fotorealistă, rezultatele preliminare sugerează că această abordare bazată pe agenți promite să simplifice crearea de conținut 3D. Arhitectura modulară ar putea permite, de asemenea, ca fiecare componentă a agentului să fie îmbunătățită independent.
„Investigațiile noastre empirice confirmă faptul că 3D-GPT nu numai că interpretează și execută instrucțiuni, oferind rezultate fiabile, dar colaborează și în mod eficient cu designerii umani”, au scris cercetătorii.
Prin generarea de cod pentru a controla software-ul 3D existent, în loc să construiască modele de la zero, 3D-GPT oferă o bază flexibilă pe care să se construiască pe măsură ce tehnicile de modelare continuă să avanseze.
Cercetătorii concluzionează că sistemul lor „evidențiază potențialul LLM-urilor în modelarea 3D, oferind un cadru de bază pentru viitoarele progrese în generarea de scene și animație”.
Această cercetare ar putea revoluționa industria de modelare 3D, făcând procesul mai eficient și mai accesibil. Pe măsură ce avansăm în era metaversului, cu crearea de conținut 3D ca și catalizator, instrumente precum 3D-GPT s-ar putea dovedi de neprețuit pentru creatori și factorii de decizie dintr-o serie de industrii, de la jocuri și realitate virtuală la cinema și experiențe multimedia.
Cadrul 3D-GPT este încă în stadiile incipiente și are unele limitări, dar dezvoltarea sa marchează un pas semnificativ înainte în modelarea 3D bazată pe AI și deschide posibilități interesante pentru progresele viitoare.
