Razvijalci GT Sophy pojasnjujejo, kako je umetno inteligenco naučil športnega vedenja

Kot prva pomembna javna objava tehnologije iz Sony AI, ki je bil ustanovljen leta 2020, prihajajoči način Gran Turismo Sophy Race Together za Gran Turismo 7 bo veliko igralcev prvič izpostavljeno kompleksni tehnologiji umetne inteligence, ki bi lahko trajno vplivala na številne igre Sony Interactive Entertainment. Če je AI nesramen, nepošten in nepremagljiv za mnoge igralce, bi GT Sophy lahko razumeli kot še en opozorilni znak, da AI še ni pripravljen na premiero. Zato je zagotavljanje primernega športnega bontona GT Sophy prednostna naloga njegovih razvijalcev.

Pri dirkanju se morate prepričati, da vozite agresivno, ker želite zmagati, a hkrati želite voziti pošteno,« Sony AI COO Michael Spranger pove Digital Trends. »Ne morete se zaleteti v druge avtomobile, da bi pridobili prednost, in zagotoviti morate, da lahko vsi pošteno tekmujejo. To je zanimivo področje, ker so ta pravila precej nenatančna; obstaja pravilnik, vendar potrebuje razlago sodnikov. Ugotoviti to pravilno – agresivna in tekmovalna vožnja v primerjavi z pošteno vožnjo – je eden od velikih izzivov GT Sophy.«

Priporočeni videoposnetki

Sony AI, Sony Interactive Entertainment in Polyphony Digital so potrdili, da bodo igralci lahko dirkali z GT Sophy v omejenem času. Gran Turismo 7 način od 21. februarja. Da bi prišli do te točke, so njeni razvijalci opravili veliko dela in izboljšali ne le spretnost GT Sophy z učenjem za krepitev, ampak tudi njen bonton v smeri nejasnega nabora pravil, ki temeljijo na vljudnosti. Pred svojim dodatkom k Gran Turismo 7, Digitalni trendi so se pogovarjali s Sonyjevim glavnim direktorjem za umetno inteligenco Michaelom Sprangerjem in vodjo projekta GT Sophy Petrom Wurmanom, da bi izvedeli več o njihov etični pristop do športnega vedenja GT Sophy in kakšne bodoče uporabe te tehnologije vidijo v igranje.

Naslednji intervju je bil urejen zaradi jedrnatosti in jasnosti.

Zakaj je bil Gran Turismo najprivlačnejša možnost za razvoj napredne umetne inteligence?

Posnetek glave Sony AI COO dr. Michaela Sprangerja.
Michael Spranger, dr., operativni direktor Sony AI

Michael Spranger: To je bilo zato, ker je bilo to mogoče in ker je Gran Turismo res razburljiva igra. Gran Turismo je del PlayStationa že od vsega začetka. To je ikonična igra, ki ponuja to posebno izzivalno področje fizičnega realizma, strategije, odločanja in športnega bontona. Poleg tega ima veliko občinstvo ljudi, ki dejansko spremlja igro, kar pomeni, da ima lahko vsaka tehnologija, ki jo razvijemo v igri, potencialno pomemben vpliv na milijone igralcev. Obožujem tudi igro. Zaradi teh stvari smo izbrali Gran Turismo kot eno prvih tarč projektov umetne inteligence za igre.

Kako okrepljeno učenje omogoča, da ta umetna inteligenca prevzame več tveganja ali vozi bolj impresivno kot vaša standardna umetna inteligenca za igre? Ali samo poskuša voziti najbolj natančno dirkalno linijo?

Peter Wurman: Obstajajo različne stopnje spretnosti. Osnovna črta se na stezi vozi hitreje, zato učenje z okrepitvijo deluje tako, da agentu AI omogoči, da razišče, kakšen učinek imajo njegova dejanja na svet, in nato poskuša povečati svojo nagrado. S pozitivnimi signali za hitrejšo vožnjo po stezi se nauči zelo hitro voziti po stezi. Nauči se pritisniti na stopalko za plin in zaviti v ovinke, da se ne zaleti, kar je odlično za treniranje scenarija vožnje na čas.

Da bi dejansko postal a tekmovalni dirkač, smo mu morali dati druge znake za nagrajevanje, ker je peljal mimo avtomobilov, ki so pred njim, in ne preprečil avtomobilom za njim, da bi peljali mimo njega. Kaznili smo ga tudi za trčenje ali zalet v druge avtomobile. Ta kombinacija nagrad in kazni je zahtevala nekaj truda, da bi bila prava, a ko smo opravili trening s pravo populacijo nasprotnikov, se je naučil biti zelo učinkovit dirkač.

Posnetek glave vodje projekta GT Sophy in direktorja Sony AI America Petra Wurmana.
Peter Wurman, doktor znanosti, direktor Sony AI America in vodja projekta GT Sophy

Kaj so se največ naučili iz prvih nekaj dogodkov Race Together, ki ste jih organizirali z vrhunskimi Gran Turismo Sport igralci?

Peter Wurman: Če ste spremljali projekt, boste vedeli, da sta bili dve dirki. Prvo smo dobro opravili, vendar nismo osvojili ekipnega rezultata. Nekaj ​​zanimivih stvari, ki smo se jih naučili, je bilo povezanih z iskanjem ravnotežja med odločnostjo in dobrim športom. Dva tedna prej smo ugotovili, da je agent, ki smo ga izšolali, preveč agresiven in mu ne bodo dovolili dirkati, zato smo se morali prerivati ​​in prilagajati stvari. Ne morete imeti enega agenta AI, ki je bil res dober pri hitri vožnji, in drugega, ki je razmišljal o taktičnih vidikih podajanja; namesto tega smo jih morali združiti v enega koherentnega agenta, ki je počel oboje hkrati. To so stvari, ki smo jih videli po dirka julija 2021, zato smo se počutili veliko bolj samozavestni, ko smo vstopili v dirka oktober 2021.

Michael Spranger: Tam so nam rekli, da je preveč agresiven, potem pa smo na dan prve ekshibicijske dirke dejansko izgubili dirko, ker nismo bili dovolj agresivni in plašni. Težava, kako uravnotežiti te stvari, je bila resnično očitna med razvojem projekta.

Ponovitev tekme Gran Turismo Sophy Race Together v igri Gran Turismo 7.

Katere spremembe je bilo treba narediti v GT Sophy, ko ste se odločili, da ga dodate Gran Turismo 7 in ne le trenirati v testnem okolju?

Peter Wurman: Največji je ta, da je na vseh razstavah GT Sophy deloval na ločenem računalniku in se prek omrežne povezave pogovarjal s konzolo PlayStation. Tukaj je GT Sophy vdelan v igro. Usposobiti, da deluje na PlayStationu z viri, ki so nam bili na voljo po vsem upodabljanju in drugih stvareh, ki se dogajajo, je bilo malo inženirskega dela.

Druga stvar je, da je Polyphony Digital resnično želel, da je agent izjemno dober primer dirkalnega sloga in dirkalnih veščin. Uvedli smo nekaj sprememb, da bi spodbudili GT Sophy, da ostane bolj znotraj linij. Če ste gledali katero od ekshibicij, boste videli, da je bil res dober pri uporabi celotne steze, včasih je postavil dve gumi v travo. To je zakonito, vendar ni ravno to, kar bi lahko počeli v pravem dirkalnem avtomobilu. Naredili smo nekaj sprememb, da bi GT Sophy ostala bolj med vrsticami. Še vedno je zelo hiter, a nekoliko čistejši.

Večinoma smo osredotočeni na to, da poskušamo spoštovati pravila športnega obnašanja v avtomobilskih dirkah.

Katere so glavne stvari, ki se jih ekipa Sony AI upa naučiti z dodajanjem Gran Turismo Sophy Race Together v Gran Turismo 7?

Peter Wurman: Glavna je ta, da upamo, da bodo ljudje uživali v igranju proti njemu, se počutili, kot da so resnično izzvani na vseh ravneh spretnosti, in se učijo postati bolje simulirani vozniki dirkalnih avtomobilov.

Michael Spranger: Prav tako želimo videti, kako ljudje komunicirajo s tehnologijo. Trenutno je peščica ljudi, ki je izkusila to tehnologijo, zato nas zanima, kako bodo ljudje to uporabili za učenje, pridobivanje novih znanj in novih izkušenj. Mislim, da je to v mnogih pogledih bistvo projekta. Imamo tehnološki preboj in mislim, da je to zelo pomembno, vendar mislim, da odpiramo povsem novo stopnjo za ljudi in v Gran Turismu. V mnogih pogledih ima vgrajeni AI precej ozek razpon zmogljivosti, ki ga lahko presežete, ko postanete vmesni gonilnik pri vsaki težavnosti.

Tudi z razmeroma malo kombinacijami steza-avtomobil, ki smo jih predstavili tukaj, od tega, kar zmorem jaz, do tega, kar zmorejo nekateri najboljši igralci, lahko vsak najde res zanimivo tekmo. Upamo, da bomo tega videli še več in videli, kako se ljudje iz tega učijo. Nekaterim igralcem je tudi zelo težko najti dobre nasprotnike in prvič jih lahko imaš ponavljajoče se interakcije z vrednim nasprotnikom, ne da bi morali poklicati vse svoje prijatelje in jim dati vse skupaj. To bo nekaj, kjer bodo ljudje lahko veliko napredovali pri izboljšanju igre, saj lahko do neke mere pridobijo te prilagojene izkušnje.

Prvoosebna perspektiva dirke Gran Turismo Sophy Race Together v igri Gran Turismo 7.

Na etični strani stvari, ali lahko razložite postopek določanja, kaj je športno vedenje za GT Sophy, da ne nadleguje določenih igralcev?

Peter Wurman: no, ne more govoriti s teboj, zato je veliko slabih stvari, ki jih GT Sophy ne more narediti, ker to ni del igre. Večinoma smo osredotočeni na to, da poskušamo spoštovati pravila športnega obnašanja v avtomobilskih dirkah; zdaj, to so precej nebuloze. Ne morete blokirati legitimne priložnosti za podajo in podobnih stvari. V teh pravilih je kup mehkih besed, ki jih je bilo težko kodirati in programirati, zato smo jih morali približati s signali za nagrajevanje in kaznimi, če je naredil stvari, kot je trčenje drugega avtomobila.

Nato smo ga morali dati Polyphony Digital in testnim voznikom ter jim omogočiti, da nam posredujejo povratne informacije, ker dirka proti drugim agentom AI nam v resnici ne pokaže, ali je pripravljen na tekmovanje z različnimi človeškimi dirkami stilov. To je zahtevalo nekaj truda in ponavljanja, da je bilo to pravilno.

Michael Spranger: Za to izdajo se mi zdi pošteno reči, da je konkurenčna. Poskušal bo prehiteti igralce, vendar jih ne bo bombardiral. Je tekmovalen, a vljuden. Vsekakor je na vas pritisk; videli ga boste v vzvratnih ogledalih, kako vas poskuša prehiteti. Hkrati vam bo skušal dati nekaj prostora, da boste lahko dirkali konkurenčno, a pošteno.

Peter Wurman: Če pa naredite nered, bo to izkoristilo.

Michael Spranger: Tako je, takoj!

Meni z možnostmi dirke načina Gran Tursimo Sophy Race Together v Gran Turismo 7.

Kam vidite GT Sophy in tehnologijo AI v igrah Sony v naslednjih petih letih?

Michael Spranger: Očitno ne moremo napovedati ničesar posebej, vendar na splošno obstaja več plasti. Še vedno obstajajo izzivi in ​​stvari, ki jih lahko naredimo znotraj Gran Turisma, da odklenemo nove izkušnje, in mislim, da s tem še nismo končali. Obstaja resnično navdušenje nad napredovanjem tehnologije. Potem smo z vidika Sonyjeve umetne inteligence korporativnih raziskav in razvoja ter strateških pobud resnično navdušeni nad tem, kaj lahko ta tehnologija prinese igranju iger na splošno.

Druge igre nam bodo dale drugačen izziv, ki ga moramo premagati, in bodo povečale zmogljivosti tehnologije. To je nastajajoča tehnologija, ki je v preteklosti dosegla nekaj uspeha, vendar mislim, da je to, kar počnemo tukaj, precej različno v občutek, da delamo znanstvene preboje, potem pa jih tudi uvedemo in poskrbimo, da ljudje dobijo umetno inteligenco tehnologija. To bo tehnologijo potisnilo naprej in omogočilo večje izkušnje.

Interakcija je jedro PlayStationa, ni napaka, da se imenuje Sony Interactive Entertainment. V resnici gre za to, kakšna je vaša interakcija s stvarmi, ki jih najdete v igri, in to se mi zdi tehnologija ima potencial, da resnično odklene naslednjo generacijo iger, nad čimer smo resnično navdušeni to.

Priporočila urednikov

  • CES 2023: Gran Turismo 7 prihaja na PS VR2 kot uvodna igra
  • Gran Turismo 7 bo spremenil izplačila dobroimetja po odzivu
  • Gran Turismo 7 ima muzej za ljubitelje avtomobilske zgodovine