Podczas konferencji Neural Information Processing w Montrealu w Kanadzie badacze Nvidii wykazali, że tak mógłby wykorzystać moc sztucznej inteligencji do renderowania syntetycznych, a jednocześnie realistycznych scen ze szczegółami i tekstury. Naukowcy twierdzą, że prace są wciąż na wczesnym etapie i nie jest jasne, kiedy technologia będzie dostępna udostępniane konsumentom, ale renderowanie oparte na sztucznej inteligencji firmy Nvidia ma duży potencjał w przestrzeń do gier.
„Ta praca dotyczy nowego sposobu renderowania grafiki komputerowej za pomocą sieci neuronowych” – powiedział podczas telekonferencji wiceprezes ds. głębokiego uczenia się stosowanego w firmie Nvidia, Bryan Catanzaro. Zasadniczo badacze chcieli wiedzieć, w jaki sposób mogą zastosować sztuczną inteligencję. aby ulepszyć grafikę komputerową, a rozwiązaniem jest zastosowanie uczenia maszynowego do rzeczywistych filmów w celu renderowania nowej grafiki.
Polecane filmy
„Stworzyliśmy system, który wykorzystuje reprezentacje świata fizycznego na wysokim poziomie — zasadniczo tworzy szkic wideo i przekształca go w wyrenderowaną scenę” – powiedział Catanzaro. „Model rozumie ogólne informacje o obiektach w świecie rzeczywistym, a następnie opracowuje je, dodając informacje o teksturze i oświetleniu. Celem jest możliwość syntezy nowych scen z grafiką.
Do analizy istniejących filmów wykorzystuje się uczenie maszynowe, a Nvidia zastosowałaby techniki widzenia komputerowego w celu dodawania etykiet do obiektów i ich właściwości. Oznacza to, że A.I. będzie w stanie rozpoznać miejski krajobraz miejski i zrozumieć, czym są na przykład drzewa, samochody lub budynki.
Według Nvidii technologia ta wywodzi się z istniejących badań, np. przeprowadzonych na Uniwersytecie Kalifornijskim w Berkeley. W przeszłości firma prezentowała inne techniki renderowania oparte na sztucznej inteligencji, w tym taką, która to umożliwia usunąć szum z obrazu.
Naukowcom udało się osiągnąć renderowanie w czasie rzeczywistym na procesorze graficznym Tensor Core, ale na konferencji Nvidia zademonstrowała technologię na swojej karcie Titan V. „Chociaż można to zrobić na dowolnym procesorze, aspekt czasu rzeczywistego wymaga dużej ilości sztucznej inteligencji. przepustowość” – wyjaśnił Catanzaro, zauważając, że procesor graficzny Tensor Core jest ważny.
Dzięki możliwości tworzenia treści i dodawania ich do wirtualnych światów rynek gier mógłby znacznie zyskać na wynikach tych badań. Programiści mogą na przykład „zremasterować” stare gry, ponownie renderując stare tytuły w celu dodania grafiki w wysokiej rozdzielczości, lub mogą przy niewielkim wysiłku dodawać nowe poziomy do istniejących gier.
Podstawowym przykładem tego, jak to działa, jest to, że użytkownicy mogą nagrać swój film i przesłać go do gry, a renderowanie umożliwi utworzenie wysoce spersonalizowanych awatarów do wykorzystania w grze. Nvidia udostępniła obecnie kod będący wynikiem swoich badań na zasadach open source, ale Catanzaro ostrzega, że wczesne prace w tej dziedzinie są bardziej odpowiednie dla informatyków niż twórców gier.
W osobnym demo Nvidia pokazała, że potrafi analizować ruchy taneczne — niczym z popularnego teledysku styl Gangnam — i przekazać te ruchy innej osobie, korzystając z tych samych technik widzenia komputerowego. „Analizujemy kod danej osoby i to staje się naszym szkicem” – powiedział Catanzaro. „A model renderuje osobę docelową, biorąc pod uwagę ten szkic”.
Nvidia ostrzega, że jest to wciąż technologia na wczesnym etapie, ale można też ulepszać grafikę istniejącą grę i wytrenuj model na obrazach świata rzeczywistego, aby ponownie renderować stare gry, aby wyglądały lepiej. Ponieważ technologia ta wymaga, aby komputer analizował obiekty znane w prawdziwym świecie, Catanzaro ostrzega, że nie sprawdzi się w przypadku fantastycznych rzeczy, takich jak renderowanie elfów Świętego Mikołaja. Teoretycznie, przyznaje, można wyszkolić komputer do renderowania elfów, ale trzeba tworzyć fizyczne elfy i przechwytywać obrazy, aby komputer mógł się tego nauczyć.
Jak śledzenie promieni technologię wprowadzoną w najnowszej serii RTX firmy Nvidia karty graficzne z myślą o konsumentach firma stwierdziła, że renderowanie oparte na sztucznej inteligencji jest wykorzystywane w sposób hybrydowy i nie ma na celu zastąpienia tradycyjnych technik renderowania. Zamiast tego renderowanie oparte na sztucznej inteligencji ma współistnieć i być używane z tradycyjnymi silnikami renderującymi grafikę.
Na razie nie jest jasne, kiedy technologia ta trafi na rynek gier. Catanzaro optymistycznie spekulował, że może to zająć zaledwie kilka lat. W połączeniu z śledzenie promienirenderowanie scen oparte na sztucznej inteligencji zapewni wysokiej jakości efekty wizualne w grach renderowanych w czasie rzeczywistym.
Zalecenia redaktorów
- Przetestowałem nową funkcję RTX firmy Nvidia i naprawiłem najgorszą część gier na PC
- Czołowi autorzy żądają zapłaty od firm zajmujących się sztuczną inteligencją za korzystanie z ich pracy
- Wix używa ChatGPT, aby pomóc Ci szybko zbudować całą witrynę internetową
- Ten tajemniczy procesor graficzny Nvidia to absolutna potworność — właśnie przyjrzeliśmy się temu jeszcze raz
- Mimo wszystko RTX 4060 Nvidii może nie być takim rozczarowaniem
Ulepsz swój styl życiaDigital Trends pomaga czytelnikom śledzić szybko rozwijający się świat technologii dzięki najnowszym wiadomościom, zabawnym recenzjom produktów, wnikliwym artykułom redakcyjnym i jedynym w swoim rodzaju zajawkom.
