У петак су истраживачи из NVIDIA најавио је Магиц3Д – модел вештачке интелигенције који може да генерише 3Д моделе из текстуалних описа. Након уноса трага, као што је „Плава отровна жаба са стрелицом која седи на локвању“, Магиц3Д генерише 40Д мрежасти модел са текстуром у боји за око XNUMX минута. Уз модификације, добијени модел се може користити у видео играма или уметничким сценама у ЦГИ формату.
У свом научном чланку NVIDIA види Магиц3Д као одговор на ДреамФусион, модел текста у 3Д који су Гоогле истраживачи најавили у септембру. Баш као што ДреамФусион користи модел текста у слику за креирање 2Д слике која се затим оптимизује у волуметријске податке НеРФ (Неурал радианце фиелд), Магиц3Д користи процес у два корака који узима груби модел креиран при ниској резолуцији и оптимизује га за већа резолуција. Према ауторима чланка, резултујућа метода Магиц3Д може да генерише тродимензионалне објекте двоструко брже од ДреамФусион-а.
Магиц3Д такође може да врши уређивање 3Д мрежа у ходу. Са 3Д моделом ниске резолуције и основним описом алата, можете променити текст да бисте променили резултујући модел. Магиц3Д такође демонстрира очување исте радње током неколико генерација (концепт који се често назива кохерентност) и примену 2Д стила слике (као што је кубистичка слика) на 3Д модел.
NVIDIA није објавила никакав Магиц3Д код са својим истраживачким радом.
Способност генерисања 3Д из текста изгледа као природна еволуција у модерним моделима дифузије, који користе неуронске мреже за синтетизовање новог садржаја након интензивне обуке на низу података. Тек 2022. године видели смо појаву моћних модела текста у слику као што су ДАЛЛ-Е и Стабле Диффусион, као и рудиментарне генераторе текста у видео од Гугла и Мета.
Што се тиче Магиц3Д-а, истраживачи који стоје иза њега се надају да ће омогућити било коме да креира 3Д моделе без потребе за посебном обуком. Једном усавршена, резултујућа технологија би могла да убрза развој видео игара (и виртуелне стварности) и може на крају наћи употребу у специјалним ефектима за филм и телевизију. На крају свог чланка пишу: „Надамо се да са Магиц3Д можемо демократизовати 3Д синтезу и откључати свачији креативни потенцијал у креирању 3Д садржаја.“
Можете помоћи Украјини да се бори против руских освајача. Најбољи начин да то урадите је да донирате средства Оружаним снагама Украјине путем Савелифе или преко званичне странице НБУ.
Прочитајте такође:
- У Шведској су научили како да штампају микроелектронику на 3Д штампачима
- Прашина се може користити за 3Д штампање на Марсу