GT Sophy arendajad selgitavad, kuidas see õpetas tehisintellekti sportlikku käitumist

Esimese olulise avaliku tehnoloogia väljalasena Sony AI, mis loodi 2020. aastal, eelseisev Gran Turismo Sophy Race Together režiim Gran Turismo 7 on paljude mängijate esimene kokkupuude keerulise AI-tehnoloogiaga, millel võib olla püsiv mõju paljudele Sony Interactive Entertainmenti mängudele. Sellisena, kui tehisintellekt on ebaviisakas, ebaõiglane ja paljude mängijate jaoks ületamatu, võib GT Sophyt pidada järjekordseks hoiatusmärgiks, et tehisintellekt ei ole veel parimaks ajaks valmis. Seetõttu on GT Sophy jaoks õige spordietiketi tagamine selle arendajate jaoks prioriteet.

Võidusõidus pead sa veenduma, et sõidad agressiivselt, sest tahad küll võita, aga samal ajal tahad sõita ausalt. Sony AI COO Michael Spranger räägib Digital Trends. "Eelise saamiseks ei saa teiste autodega kokku põrgata ja on vaja tagada, et kõik saaksid ausalt võistelda. See on huvitav valdkond, sest need reeglid on üsna ebatäpsed; reeglistik on olemas, kuid see vajab kohtunike tõlgendust. Selle õige saavutamine – agressiivne ja konkurentsivõimeline sõit versus aus sõitmine – on GT Sophy üks suuremaid väljakutseid.

Soovitatavad videod

Sony AI, Sony Interactive Entertainment ja Polyphony Digital on kinnitanud, et mängijad saavad GT Sophyga võidu sõita piiratud aja jooksul Gran Turismo 7 režiim alates 21. veebruarist. Selle punktini jõudmiseks tegid selle arendajad palju tööd, et täiustada mitte ainult GT Sophy oskusi tugevdava õppe kaudu, vaid ka etiketti viisakuspõhiste reeglite hägustamise suunas. Enne selle lisamist Gran Turismo 7, Digital Trends rääkis Sony AI COO Michael Sprangeri ja GT Sophy projektijuhi Peter Wurmaniga, et saada lisateavet nende eetiline lähenemine GT Sophy sportlikule käitumisele ja seda, millist tulevikku nad selle tehnoloogia jaoks kasutavad. mängimine.

Järgnev intervjuu on lühiduse ja selguse huvides toimetatud.

Mis tegi Gran Turismost kõige ahvatlevama võimaluse arenenud tehisintellekti arendamiseks esmalt?

Peapilt Sony AI COO Michael Sprangerist, PhD.
Michael Spranger, PhD, Sony AI COO

Michael Spranger: Selle põhjuseks oli see, et see oli võimalik ja Gran Turismo on tõeliselt põnev mäng. Gran Turismo on olnud PlayStationi osa algusest peale. See on ikooniline mäng, mis pakub konkreetset väljakutset füüsilise realismi, strateegia, otsuste tegemise ja spordietiketi kohta. Lisaks on sellel palju inimesi, kes mängu tegelikult jälgivad, ja see tähendab, et mis tahes tehnoloogia, mida me mängus arendame, võib avaldada potentsiaalselt olulist mõju miljonitele mängijatele. Mulle meeldib ka mäng. Need asjad kokku panid meid valima Gran Turismo üheks esimeseks mängu-AI-projektide sihtmärgiks.

Kuidas võimaldab tugevdav õpe sellel tehisintellektil võtta rohkem riske või sõita muljetavaldavamalt kui teie tavaline mängu AI? Kas see on lihtsalt katse sõita kõige täpsema võidusõiduliiniga?

Peter Wurman: Oskustasemeid on erinevad. Lähtejoon sõidab rajal kiiremini, nii et tugevdav õpe toimib, lastes tehisintellekti agendil uurida, milline on tema tegevuste mõju maailmale, ja seejärel proovida oma tasu maksimeerida. Andes talle positiivseid signaale rajal kiiremini minekuks, õpib ta rajal väga kiiresti ringi sõitma. See õpib vajutama gaasipedaali ja murdma kurvi, et ei jookseks kokku, mis sobib suurepäraselt ajaproovi stsenaariumi jaoks treenimiseks.

Et see tegelikult a konkurentsivõimeline võidusõitja, pidime andma talle muid tunnustussignaale tema ees sõitvatest autodest möödumise eest ja mitte takistama tagant sõitvaid autosid sellest möödumast. Samuti määrasime talle karistused kokkupõrke või teiste autode otsa sõitmise eest. See auhindade ja karistuste kombinatsioon nõudis teatud pingutust, et õigeks saada, kuid kui tegime treeningu õige populatsiooni vastastega, õppis see olema väga tõhus võidusõitja.

Peapilt GT Sophy projektijuhist ja Sony AI America direktorist Peter Wurmanist.
Peter Wurman, PhD, Sony AI America direktor ja GT Sophy projektijuht

Millised olid suurimad õpingud paarist esimesest Race Togetheri üritusest, mida te tipptasemel pidasite Gran Turismo Sport mängijad?

Peter Wurman: Kui olete projektiga kaasas käinud, teate, et võistlusi oli kaks. Esimesel läks meil hästi, kuid meeskondlikku skoori me ei võitnud. Mõned huvitavad asjad, mida me sellest õppisime, olid seotud enesekehtestamise ja hea spordiala tasakaalu leidmisega. Saime kaks nädalat varem teada, et meie koolitatud agent on liiga agressiivne ja tal ei lubata võidusõitu teha, nii et pidime rüselema ja asju kohandama. Sul ei saa olla ühte tehisintellekti agenti, kes oskas väga hästi kiiresti sõita, ja teist, kes mõtles möödasõidu taktikalistele aspektidele; selle asemel pidime need ühendama üheks sidusaks agendiks, mis tegi mõlemat korraga. Need on asjad, mida me nägime pärast Juuli 2021 võistlus, nii et tundsime end programmi sisenedes palju enesekindlamalt Oktoobri 2021 võistlus.

Michael Spranger: Oli selline asi, kus meile öeldi, et see on liiga agressiivne, aga siis esimesel näitusevõistluse päeval me tegelikult võistluse kaotasime, kuna polnud piisavalt agressiivsed ja arglikud. Probleem, kuidas neid asju tasakaalustada, oli projekti arendamise käigus tõesti ilmne.

Gran Turismo Sophy Race Togetheri mängu kordusmäng Gran Turismo 7-s.

Milliseid muudatusi tuli GT Sophys teha, kui otsustasite selle lisada Gran Turismo 7 ja mitte lihtsalt treenida seda testkeskkonnas?

Peter Wurman: Suurim on see, et kõigil näitustel jooksis GT Sophy eraldi arvutis ja rääkis võrguühenduse kaudu PlayStationi konsooliga. Siin on GT Sophy mängu põimitud. Selle PlayStationis toimima panemine ressurssidega, mis olid meile kättesaadavad pärast kogu renderdamist ja muud toimuvat, oli veidi inseneritööd.

Teine asi on see, et Polyphony Digital tahtis väga, et agent oleks ülimalt hea näide võidusõidustiilist ja võidusõiduoskustest. Tegime mõned muudatused, et julgustada GT Sophyt rohkem liinidesse jääma. Kui olete mõnda näitust vaadanud, näete, et see oli tõesti hea, et kasutada kogu rada, mõnikord pannes kaks rehvi muru sisse. See on seaduslik, kuid mitte täpselt see, mida saaksite teha tõelises võidusõiduautos. Tegime mõned muudatused, et hoida GT Sophy rohkem ridade vahel. See on endiselt väga kiire, kuid natuke puhtam.

Oleme peamiselt keskendunud sellele, et autospordis järgida sportliku käitumise reegleid.

Mis on peamised asjad, mida Sony AI meeskond loodab õppida Gran Turismo Sophy Race Togetheri lisamisest Gran Turismo 7?

Peter Wurman: Peamine on see, et loodame, et inimesed naudivad selle vastu mängimist, tunnevad, et neil on kõigil oskuste tasemetel tõsine väljakutse ja nad õpivad paremini simuleeritavateks võidusõiduautojuhtideks.

Michael Spranger: Samuti tahame näha, kuidas inimesed tehnoloogiaga suhtlevad. Praegu on seda tehnoloogiat kogenud käputäis inimesi, seega ootame uudishimulikult, kuidas inimesed kavatsevad seda ise õppimiseks, uute oskuste omandamiseks ja uute kogemuste saamiseks kasutada. Ma arvan, et see on mitmes mõttes projekti tuum. Meil on tehnoloogiline läbimurre ja ma arvan, et see on tõesti oluline, kuid ma arvan, et avame inimestele ja Gran Turismos täiesti uue etapi. Sisseehitatud tehisintellektil on paljuski üsna kitsas jõudlusriba ja te saate seda ületada, kui olete igas raskusastmes vahepealne juht.

Isegi nende suhteliselt väheste raja-autode kombinatsioonidega, mille me siin avalikustasime, alates sellest, mida mina suudan ja lõpetades sellega, mida mõned tippmängijad suudavad, võivad kõik leida tõeliselt huvitava vaste. Loodame seda rohkem näha ja näha, kuidas inimesed sellest õpivad. Mõnel mängijal on ka väga raske leida häid vastaseid ja esimest korda võib see teil olla korduvad suhtlused väärilise vastasega, ilma et peaksite kõiki oma sõpru välja kutsuma ja laskma neil kõigil tulla koos. See on midagi, mille puhul inimesed saavad mängu paremaks muutmisel palju edusamme teha, kuna neil on teatud määral kohandatud kogemusi.

Esimese isiku vaatenurk Gran Turismo Sophy Race Togetheri võidusõidule Gran Turismo 7-s.

Asjade eetilisest küljest, kas saate selgitada protsessi, mille käigus tehakse kindlaks, mis on GT Sophy jaoks sportlik käitumine, nii et see ei ahistaks teatud mängijaid?

Peter Wurman: Noh, see ei saa sinuga rääkida, seega on palju halbu asju, mida GT Sophy teha ei saa, sest see pole mängu osa. Oleme peamiselt keskendunud sellele, et püüame kinni pidada autospordi reeglitest; nüüd on need üsna hägused. Te ei saa blokeerida seaduslikku möödumisvõimalust ja muud taolist. Nendes reeglites on hunnik hägusaid sõnu, mida oli raske kodeerida ja programmeerida, nii et pidime neid ligikaudselt hindama preemiasignaalide ja karistustega, kui see tegi näiteks mõne teise auto põrutamise.

Seejärel pidime andma selle Polyphony Digitalile ja testisõitjatele ning laskma neil meile tagasisidet anda, sest Teiste tehisintellekti agentide vastu võitlemine ei näita meile tegelikult, kas see on valmis võistlema erinevate inimeste võidusõiduga stiilid. Selle õigeks muutmine nõudis pingutust ja iteratsiooni.

Michael Spranger: Selle väljaande puhul arvan, et on aus öelda, et see on konkurentsivõimeline. See üritab mängijatest mööduda, kuid ei hakka neid pommitama. See on konkurentsivõimeline, kuid viisakas. See avaldab teile kindlasti survet; sa näed seda tahavaatepeeglitest üritades sinust mööduda. Samal ajal püüab see anda teile ruumi, et saaksite võistluslikult, kuid õiglaselt võistelda.

Peter Wurman: Aga kui teete segaduse, on sellest kasu.

Michael Spranger: Täpselt nii, kohe!

Gran Tursimo Sophy Race Together režiimi võistlusvaliku menüü Gran Turismo 7-s.

Kus näete GT Sophy ja tehisintellekti tehnoloogiat Sony mängudes järgmise viie aasta jooksul?

Michael Spranger: Ilmselgelt ei saa me midagi konkreetselt välja kuulutada, kuid üldiselt on sellel mitu kihti. Gran Turismos on ikka veel väljakutseid ja asju, mida saame uute kogemuste avamiseks teha, ja ma ei usu, et oleme sellega veel lõpetanud. Tehnoloogia edasiarendamisel on tõeline põnevus. Sony tehisintellekti vaatenurgast, ettevõtte teadus- ja arendustegevuse ning strateegiliste algatuste seisukohast oleme väga põnevil selle üle, mida see tehnoloogia mängudele üldiselt kaasa võib tuua.

Teised mängud annavad meile teistsuguse väljakutse, millest tuleb üle saada, ja täiustavad tehnoloogia võimalusi. See on arenev tehnoloogia, millel on minevikus olnud edu, kuid ma arvan, et see, mida me siin teeme, on üsna erinev tunneme, et teeme teaduslikke läbimurdeid, kuid siis võtame selle ka kasutusele ja hoolitseme selle eest, et inimesed saaksid AI-d kätte. tehnoloogia. See lükkab tehnoloogiat edasi ja avab suuremad kogemused.

Koostoime on PlayStationi keskmes, see pole viga, et seda nimetatakse Sony Interactive Entertainmentiks. Asi on tegelikult selles, milline on teie suhtlus mängus leiduvate asjadega, ja ma tunnen, et see on nii tehnoloogial on potentsiaali tõesti avada järgmise põlvkonna mängud ja me oleme selle üle väga põnevil et.

Toimetajate soovitused

  • CES 2023: Gran Turismo 7 jõuab PS VR2-le käivitusmänguna
  • Gran Turismo 7 muudab krediidi väljamakseid pärast tagasilööki
  • Gran Turismo 7-s on autoajaloo austajatele mõeldud muuseum