GT Sophy programeri objašnjavaju kako je AI naučio sportskom ponašanju

Kao prvo značajno javno izdanje tehnologije iz Sony AI, koji je osnovan 2020., nadolazeći način Gran Turismo Sophy Race Together za Gran Turismo 7 bit će prvo izlaganje mnogih igrača složenoj AI tehnologiji koja bi mogla imati trajan utjecaj na mnoge igre tvrtke Sony Interactive Entertainment. Kao takav, ako je AI nepristojan, nepravedan i nepobjediv za mnoge igrače, GT Sophy bi se mogao smatrati još jednim znakom upozorenja da AI još nije spreman za premijeru. Zato je osiguravanje odgovarajuće sportske etikete za GT Sophy prioritet za njegove programere.

U utrkama se morate pobrinuti da vozite agresivno jer želite pobijediti, ali u isto vrijeme želite voziti pošteno," Sony AI COO Michael Spranger kaže za Digital Trends. “Ne možete se sudarati s drugim automobilima kako biste stekli prednost i morate biti sigurni da se svi mogu pošteno natjecati. To je zanimljivo područje jer su ta pravila prilično neprecizna; postoji pravilnik, ali treba tumačenje sudaca. Ostvariti ovo kako treba – agresivna i natjecateljska vožnja u odnosu na poštenu vožnju – jedan je od velikih izazova GT Sophyja.”

Preporučeni videozapisi

Sony AI, Sony Interactive Entertainment i Polyphony Digital potvrdili su da će se igrači moći utrkivati ​​s GT Sophy u ograničenom vremenu Gran Turismo 7 način rada počevši od 21. veljače. Da bi došli do te točke, njeni programeri učinili su mnogo rada usavršavajući ne samo vještinu GT Sophy putem učenja za potkrepljivanje, već i njezinu etiketu prema nebuloznom skupu pravila uljudnosti. Ispred svog dodatka na Gran Turismo 7, Digital Trends razgovarao je sa Sony AI COO-om Michaelom Sprangerom i voditeljem GT Sophy projekta Peterom Wurmanom kako bi saznao više o njihov etički pristup sportskom ponašanju GT Sophyja i kakvu budućnost vide za ovu tehnologiju u igrica.

Sljedeći intervju je uređen radi sažetosti i jasnoće.

Što je Gran Turismo učinilo najprivlačnijom opcijom za razvoj napredne umjetne inteligencije?

Snimka glave Sony AI COO dr. Michaela Sprangera.
Michael Spranger, dr. sc., operativni direktor tvrtke Sony AI

Michael Spranger: Bilo je to zato što je bilo moguće i zato što je Gran Turismo stvarno uzbudljiva igra. Gran Turismo je dio PlayStationa od samog početka. To je kultna igra koja pruža ovo specifično područje izazova fizičkog realizma, strategije, donošenja odluka i sportskog bontona. Također, ima veliku publiku ljudi koji stvarno prate igru, a to znači da svaka tehnologija koju razvijemo u igri može imati potencijalno značajan utjecaj na milijune igrača. Također volim igru. Kombinacija ovih stvari natjerala nas je da odaberemo Gran Turismo kao jednu od prvih meta za AI projekte za igre.

Kako učenje s pojačanjem omogućuje ovoj umjetnoj inteligenciji da preuzme više rizika ili da vozi impresivnije od vaše standardne umjetne inteligencije? Je li to samo pokušaj vožnje najpreciznije trkaće linije?

Peter Wurman: Postoje različite razine vještina. Osnovna linija se vozi brže na stazi, tako da učenje s pojačanjem funkcionira tako da dopušta agentu umjetne inteligencije da istraži kakav učinak njegove radnje imaju na svijet i zatim pokuša maksimizirati svoju nagradu. Dajući mu pozitivne signale da ide brže na stazi, ono se uči voziti po stazi vrlo brzo. Uči pritisnuti papučicu gasa i probijati se u zavojima kako se ne bi sudario, što odlično funkcionira za uvježbavanje za scenarij vožnje na vrijeme.

Da bi to zapravo bio a natjecateljski trkač, morali smo mu dati druge signale za nagradu za prolazak automobila koji su ispred njega i nesprečavanje automobila iza njega da ga prođu. Također smo mu dodijelili kazne za sudar ili nalet na druge automobile. Ova kombinacija nagrada i kazni zahtijevala je malo truda da bi bila ispravna, ali nakon što smo odradili trening s pravom populacijom protivnika, naučila je biti vrlo učinkovit trkač.

Snimka glave voditelja projekta GT Sophy i direktora Sony AI America Petera Wurmana.
Peter Wurman, PhD, direktor Sony AI America i voditelj projekta GT Sophy

Koja su najveća saznanja iz prvih nekoliko događaja Race Together koje ste održali s vrhunskim igračima Gran Turismo Sport igrači?

Peter Wurman: Ako ste pratili projekt, znat ćete da postoje dvije rase. U prvom smo bili dobri, ali nismo osvojili timski rezultat. Neke od zanimljivih stvari koje smo naučili vezane su uz pronalaženje ravnoteže između asertivnosti i dobrog sporta. Saznali smo dva tjedna prije da je agent kojeg smo trenirali preagresivan i da mu neće biti dopušteno da se utrkuje, pa smo morali otimati se i prilagođavati stvari. Ne možete imati jednog AI agenta koji je bio stvarno dobar u brzoj vožnji i drugog koji je razmišljao o taktičkim aspektima dodavanja; umjesto toga, morali smo ih spojiti zajedno u jednog koherentnog agenta koji je radio oboje u isto vrijeme. To su stvari koje smo vidjeli nakon Utrka u srpnju 2021, pa smo se osjećali puno sigurnije ulazeći u Utrka listopada 2021.

Michael Spranger: Postojala je jedna stvar za koju nam je rečeno da je preagresivna, ali onda smo prvog egzibicijskog dana utrke zapravo izgubili jer nismo bili dovoljno agresivni i plašljivi. Problem kako uravnotežiti te stvari bio je doista očit tijekom razvoja projekta.

Repriza utakmice Gran Turismo Sophy Race Together u igrici Gran Turismo 7.

Koje su promjene morale biti napravljene na GT Sophy kada ste donijeli odluku da ga dodate Gran Turismo 7 a ne samo trenirati u testnom okruženju?

Peter Wurman: Najveća je što je u svim egzibicijama GT Sophy radila na zasebnom računalu i razgovarala preko mrežne veze s PlayStation konzolom. Ovdje je GT Sophy ugrađen u igru. Natjerati ga da radi na PlayStationu s resursima koji su nam bili dostupni nakon svih renderiranja i drugih stvari koje se događaju bio je mali inženjerski posao.

Druga stvar je da je Polyphony Digital stvarno želio da agent bude izuzetno dobar primjer trkaćeg stila i trkaće vještine. Uveli smo neke promjene kako bismo potaknuli GT Sophy da više ostane unutar linija. Ako ste gledali bilo koju od ekshibicija, vidjet ćete da je bilo stvarno dobro koristiti cijelu stazu, ponekad stavljajući dvije gume na travu. To je legalno, ali nije baš ono što biste mogli učiniti u pravom trkaćem automobilu. Napravili smo neke promjene kako bismo GT Sophy više zadržali između redaka. I dalje je vrlo brz, ali malo čišći.

Uglavnom smo usredotočeni na nastojanje da se pridržavamo pravila sportskog ponašanja u automobilskim utrkama.

Koje su glavne stvari koje se Sony AI tim nada naučiti dodavanjem Gran Turismo Sophy Race Together u Gran Turismo 7?

Peter Wurman: Glavna je ta da se nadamo da će ljudi uživati ​​igrajući protiv njega, da se osjećaju kao da su stvarno izazovni na svim razinama vještina i da uče postati bolje simulirani vozači trkaćih automobila.

Michael Spranger: Također želimo vidjeti kako ljudi komuniciraju s tehnologijom. Trenutačno je nekolicina ljudi iskusila tu tehnologiju, pa smo znatiželjni vidjeti kako će je ljudi upotrijebiti za učenje, stjecanje novih vještina i nova iskustva. Mislim da je to srž projekta na mnogo načina. Imamo tehnološki napredak i mislim da je to jako važno, ali mislim da otvaramo potpuno novu pozornicu za ljude i Gran Turismo. Na mnogo načina, ugrađena umjetna inteligencija ima prilično uzak raspon performansi, a to možete nadmašiti kada postanete srednji vozač za svaku poteškoću.

Čak i s relativno malo kombinacija staza-auto koje smo ovdje predstavili, od onoga što ja mogu do onoga što mogu neki od najboljih igrača, svatko može pronaći stvarno zanimljiv spoj. Nadamo se da ćemo vidjeti više toga i vidjeti kako ljudi uče iz toga. Nekim je igračima također vrlo teško pronaći dobre protivnike, a po prvi put možete ponovljene interakcije s dostojnim protivnikom bez potrebe da pozovete sve svoje prijatelje i date im sve zajedno. Bit će to nešto u čemu ljudi mogu puno napredovati u poboljšanju igre jer do neke mjere mogu imati ta prilagođena iskustva.

Perspektiva Gran Turismo Sophy Race Together utrke iz prvog lica u Gran Turismo 7.

S etičke strane stvari, možete li objasniti postupak utvrđivanja što se smatra sportskim ponašanjem za GT Sophy tako da ne uznemirava određene igrače?

Peter Wurman: Dobro, ne može razgovarati s vama, tako da postoji mnogo loših stvari koje GT Sophy ne može učiniti jer to nije dio igre. Uglavnom smo usredotočeni na pokušaje pridržavanja pravila sportskog ponašanja u automobilskim utrkama; sad, to su prilično nebuloze. Ne možete blokirati legitimnu priliku za dodavanje i slične stvari. U tim pravilima postoji hrpa nejasnih riječi koje je bilo teško kodirati i programirati, pa smo to morali približiti signalima za nagrađivanje i kaznama ako je učinio stvari poput sudaranja drugog automobila.

Zatim smo ga morali dati Polyphony Digitalu i testnim vozačima i pustiti ih da nam daju povratne informacije jer se utrkuje protiv drugih AI agenata zapravo nam ne pokazuje je li spreman za utrku protiv raznih ljudskih utrka stilovi. Trebalo je malo truda i ponavljanja da bi se to ispravno postiglo.

Michael Spranger: Za ovo izdanje, mislim da je pošteno reći da je konkurentno. Pokušat će prestići igrače, ali ih neće bombardirati. Natjecateljski je, ali pristojan. Definitivno vam stvara pritisak; vidjet ćeš to u retrovizorima kako te pokušava prestići. U isto vrijeme, pokušat će vam dati malo prostora kako biste se mogli utrkivati ​​konkurentno, ali pošteno.

Peter Wurman: Ali ako napravite nered, to će iskoristiti.

Michael Spranger: Tako je, odmah!

Gran Tursimo Sophy Race Together izbornik opcija utrke u načinu rada Gran Turismo 7.

Gdje vidite GT Sophy i AI tehnologiju u Sonyjevim igrama u sljedećih pet godina?

Michael Spranger: Očito, ne možemo ništa konkretno najaviti, ali općenito, postoji više slojeva. Još uvijek postoje izazovi i stvari koje možemo učiniti unutar Gran Turisma kako bismo otključali nova iskustva, i mislim da s tim nismo završili. Postoji pravo uzbuđenje oko daljnjeg guranja tehnologije. Zatim, iz Sonyjeve AI perspektive korporativnog istraživanja i razvoja i strateških inicijativa, stvarno smo uzbuđeni zbog toga što ova tehnologija općenito može donijeti igricama.

Druge igre će nam dati drugačiji izazov koji trebamo savladati i unaprijedit će mogućnosti tehnologije. To je tehnologija u nastajanju koja je u prošlosti imala uspjeha, ali mislim da je ono što radimo ovdje prilično različito u osjećamo da činimo znanstvena otkrića, ali onda to također implementiramo i osiguravamo da ljudi dođu do AI-ja tehnologija. To će gurnuti tehnologiju naprijed i otključati veća iskustva.

Interakcija je srž PlayStationa, nije greška što se zove Sony Interactive Entertainment. Stvarno se radi o tome kakva je vaša interakcija sa stvarima koje nađete u igri, i ja to osjećam tehnologija ima potencijal stvarno otključati sljedeću generaciju igara i jako smo uzbuđeni zbog toga da.

Preporuke urednika

  • CES 2023: Gran Turismo 7 dolazi na PS VR2 kao igra za lansiranje
  • Gran Turismo 7 mijenja isplate kredita nakon negativnih reakcija
  • Gran Turismo 7 ima muzej za ljubitelje povijesti automobila