Na konferenci Neural Information Processing Conference v Montrealu v Kanadě výzkumníci Nvidie prokázali, že ano mohl využít sílu umělé inteligence k vykreslení syntetických, ale realistických scén s detaily a textur. Výzkumníci tvrdí, že práce jsou stále v rané fázi a není jasné, kdy technologie bude uvolněno pro spotřebitele, ale existuje velký potenciál pro vykreslování řízené umělou inteligencí Nvidia v herní prostor.
„Tato práce je o novém způsobu vykreslování počítačové grafiky pomocí neuronových sítí,“ řekl v konferenčním hovoru viceprezident společnosti Nvidia pro aplikované hluboké učení Bryan Catanzaro. V podstatě chtěli vědci vědět, jak mohou aplikovat A.I. zlepšit počítačovou grafiku a řešením je použít strojové učení na videa v reálném světě za účelem vykreslení nové grafiky.
Doporučená videa
„Vytvořili jsme systém, který přebírá reprezentace fyzického světa na vysoké úrovni – v podstatě vezmeme náčrt videa a převedeme ho do renderované scény,“ řekl Catanzaro. „Model rozumí informacím na vysoké úrovni o objektech v reálném světě a poté je zpracovává, aby přidal informace o texturách a osvětlení. Cílem je umět syntetizovat nové scény s grafikou.“
Strojové učení se používá k analýze existujících videí a Nvidia by použila techniky počítačového vidění k přidání štítků k objektům a jejich vlastnostem. To znamená, že A.I. by byl schopen rozpoznat městské panoráma a pochopit, jaké objekty jsou například stromy, auta nebo budovy.
Tato technologie je podle Nvidie odvozena ze stávajícího výzkumu, jako je ten z Kalifornské univerzity v Berkeley. Společnost v minulosti předváděla další vykreslovací techniky založené na AI, včetně jedné, která by mohla odstranění šumu z obrazu.
Výzkumníci byli schopni dosáhnout vykreslování v reálném čase na Tensor Core GPU, ale pro konferenci Nvidia předvedla technologii na své kartě Titan V. „Ačkoli to můžete udělat na jakémkoli procesoru, aspekt v reálném čase vyžaduje hodně A.I. propustnost,“ vysvětlil Catanzaro s tím, že důležitý je GPU Tensor Core.
Díky možnosti vytvářet obsah a přidávat jej do virtuálních světů by herní trh mohl z práce vytvořené tímto výzkumem velmi těžit. Vývojáři by například mohli „remasterovat“ staré hry překreslením starých titulů, aby přidali vizuální prvky ve vysokém rozlišení, nebo mohli s minimálním úsilím přidat nové úrovně do stávajících her.
Jako základní příklad toho, jak by to fungovalo, mohou uživatelé pořídit své video, nahrát ho do hry a vykreslení bude moci vytvořit vysoce personalizované avatary pro použití ve hře. Nvidia právě nyní získala kód ze svého výzkumu, ale Catanzaro varuje, že raná práce v této oblasti je vhodná spíše pro počítačové vědce než pro vývojáře her.
V samostatném demu Nvidia předvedla, že dokáže analyzovat taneční pohyby – jako z populárního hudebního videa Gangnam styl — a přenést tyto pohyby na jinou osobu pomocí stejných technik počítačového vidění. "Analyzujeme kód osoby a to se stane naším náčrtem," řekl Catanzaro. "A model vykresluje cílovou osobu vzhledem k této skice."
Nvidia varuje, že se stále jedná o technologii v rané fázi, ale můžete také upgradovat grafiku existující hru a vycvičit model na obrazech ze skutečného světa, aby znovu vykreslil staré hry, aby vypadaly lépe. Protože tato technologie vyžaduje, aby počítač analyzoval objekty, které jsou známé v reálném světě, Catanzaro varuje, že nebude fungovat na fantastických věcech, jako je vykreslování Santových elfů. Teoreticky, připouští, můžete počítač vycvičit k vykreslování elfů, ale musíte vytvořit fyzické elfy a zachytit obrázky, aby se to počítač naučil.
Jako sledování paprsků technologie, která byla představena v nedávné řadě RTX společnosti Nvidia grafické karty pro spotřebitele společnost uvedla, že toto vykreslování založené na AI se používá hybridním způsobem a nemá nahradit tradiční techniky vykreslování. Místo toho má vykreslování založené na A.I. koexistovat a používat s tradičními grafickými vykreslovacími enginy.
Momentálně není jasné, kdy se tato technologie dostane na herní trh. Catanzaro optimisticky spekuloval, že to může trvat jen pár let. Zkombinováno s sledování paprsků, vykreslování scén založené na A.I. bude poskytovat kvalitní vizuály v herních titulech, které se vykreslují v reálném čase.
Doporučení redakce
- Testoval jsem novou funkci RTX od Nvidie a opravila nejhorší část počítačových her
- Špičkoví autoři požadují od firem zabývajících se umělou inteligencí platby za použití jejich díla
- Wix používá ChatGPT, který vám pomůže rychle vytvořit celý web
- Tento tajemný GPU Nvidia je absolutní monstrozita – a právě jsme se dočkali dalšího pohledu
- Nvidia RTX 4060 nakonec nemusí být takovým zklamáním
Upgradujte svůj životní stylDigitální trendy pomáhají čtenářům mít přehled o rychle se měnícím světě technologií se všemi nejnovějšími zprávami, zábavnými recenzemi produktů, zasvěcenými úvodníky a jedinečnými náhledy.
