ИИ на Nvidia и Ray Tracing прави Moonwalk видео селфита на Луната

В допълнение към пускането на пазара на 10 нови лаптопа RTX Studio, насочени към създателите на SIGGRAPH, Nvidia също обяви част от работата които неговите изследователски екипи са правили в областта на изкуствения интелект, добавената реалност и компютъра графики. На 50-ата годишнина от кацането на Аполо 11 на Луната, Nvidia показа как технологията за проследяване на лъчи от нейната графична карта RTX се използва за визуално подобряват изображенията заснети от НАСА преди 50 години. В SIGGRAPH, усилията на Nvidia да отбележи Аполо 11 отиват една крачка напред, позволявайки на феновете на космоса възможността да се наслагват в кратък видеоклип, сякаш са астронавтите Нийл Армстронг и Бъз Олдрин, с помощта на ИИ. и силата на проследяването на лъчи за изобразяване на тези видеоклипове реално време.

„Това, което правим, е да използваме изкуствен интелект, за да насочваме камера и хора само в техните улични дрехи, за да можем да правим оценка на 3D поза“, обясни Роб Естес, Nvidia TKTK. „Ние знаем къде се намират в 3D пространството и знаем как се движат крайниците им, така че рисуваме това, използвайки проследяване на лъчи и ви поставям с вашето движение като астронавт в сцената.

Правене на лунната походка на лунната походка

Режисьори на холивудски визуални ефекти правят нещо подобно от години, използвайки зелен екран и актьори за заснемане на движение, облечени в костюми с точки за възпроизвеждане на движение на крайници, но проследяване на лъчи и A.I. направете крачка напред, като елиминирате необходимостта от специализирано оборудване и актьори. „Можете да направите това навсякъде, където можете да заснемете някого“, Естес разясни предимствата на активирания AI проследяване на лъчи в този лунен пример. По същество присъстващите на SIGGRAPH могат да заснемат кратък видеомонтаж на себе си в скафандъра на Олдрин и Армстронг, докато правят лунната разходка, сякаш са на Луната като част от мисията Аполо 11.

„Ще имаме макет на лунната повърхност и лунния спускаем апарат и ще им позволим да видят какво представлява би било все едно да са на Луната“, каза той, като всички светлинни ефекти и изобразяване са изпълнени в реално време. „Това е много водещо изследване и никой не го е правил досега. Вие сресвате A.I. и проследяване на лъчи по начин, който има много, много практически ползи.“ Тези ползи не само помагат на Холивуд и нейните екипи за визуални ефекти, но също и дизайнери и изследователи, които се опитват да разрешат трудни проблеми с оценка на изследванията, Nvidia разширена.

Изобразяване на фове с диоптрични очила

Nvidia иска да направи изобразяването на приложения за разширена и виртуална реалност да изглежда по-реалистично и отчетливо и прилага своята технология за изобразяване с фове, за да постигне това. Това, което направи екипът от изследователи на Nvidia, е добавена поддръжка за лещи с рецепта, първа в индустрията. Въпреки че това все още е в ранен етап на изследване в момента, Nvidia предвижда ден, когато носещите очила с рецепта няма да трябва да носят отделни очила от своите устройства с добавена реалност.

Nvidia работи с няколко типа дисплеи, за да може да изгради VR или AR дисплей, съответстващ на диоптричните очила, които може да имате. „Това е голяма работа“, каза Естес. „Никога преди не сте виждали 20/20, защото просто нямаше зрителната острота за тези дисплеи.“

По същия начин, по който проследяването на лъчи може да донесе реалистични кинематографични ефекти във видеоигрите, foveated изобразяването може да направи AR сцените и изображенията да изглеждат по-реалистични с по-добра разделителна способност чрез запазване графична мощност. Вместо да изобразява цялата сцена, фовеатното изобразяване позволява на създателите да изобразяват само средната част на сцената във високо прецизност, където очите ви обикновено се фокусират, а периферните области могат да бъдат изобразени с по-малко детайли, за да спестите GPU мощност.

„Така че работим, за да сме сигурни, че проследяваме къде е вашата игра и прилагаме това, за да станете по-бързи честота на кадрите и по-добра графика при правенето на добавена реалност, или това може да се приложи и към виртуалната реалност“, каза Естес.

GauGAN, A.I. художник, е освободен

В миналото Nvidia показа как е GauGAN инструментът за рисуване може да превърне дори предизвикателите на изкуството сред нас в художници, като ви позволява да рисувате сложни, живот-животни пейзажи само с няколко прости щриха чрез използване на силата на изкуственото интелигентност. Начертаните от изкуствен интелект сцени, разкриха от Nvidia, са били използвани и в някои холивудски филми с големи имена като фон, като студиата са наслагвали елементи, които са искали да зададат цялостното настроение за клипа.

Вместо да използвате A.I. за идентифициране на елементи от сцена, като куче или котка, GauGAN, както подсказва името му, използва генеративна състезателна мрежа или GAN. Като уточнява къде е небето чрез начертаване на линия на хоризонта и къде океанът среща небето, GauGAN започва да „начертава“ сцената с облаци и вълни и потребителят може да добави скали и морски скали към този морски пейзаж, изобразявайки сцената с подходящи сенки и отражения. Така че вместо да идентифицира обекти в изображение, GAN помага да се запълни изображението с реалистично създаване и изобразяване на сцената, обясни Nvidia.

Като се има предвид популярността на инструмента, Nvidia разкри, че ще разшири достъпа до GauGAN за всички. Понастоящем Estes каза, че няма планове за монетизиране на GauGAN, въпреки творческата му работа в филмовата индустрия и че компанията просто се наслаждава на радостта, която получават другите хора използвайки го.

Препоръки на редакторите

• Nvidia дебютира Portal: Prelude RTX и можете да го играете безплатно
• 5 невероятни AI функции във Photoshop, които можете да използвате сега
• Суперкомпютърът на Nvidia може да донесе нова ера на ChatGPT
• 3 причини все пак да купувате Nvidia GPU вместо AMD
• Ако имате графична карта на Nvidia, вашият процесор може да страда в момента

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.