GT Sophyn kehittäjät selittävät, kuinka se opetti tekoälyn urheilijamaista käyttäytymistä

Ensimmäinen merkittävä julkinen teknologian julkaisu Sony AI, joka perustettiin vuonna 2020, tuleva Gran Turismo Sophy Race Together -tila Gran Turismo 7 on monien pelaajien ensimmäinen altistuminen monimutkaiselle tekoälyteknologialle, jolla voi olla pysyvä vaikutus moniin Sony Interactive Entertainmentin peleihin. Sellaisenaan, jos tekoäly on töykeä, epäreilu ja lyömätön monille pelaajille, GT Sophy voidaan nähdä uudeksi varoitusmerkiksi siitä, että tekoäly ei ole vielä valmis ensi-iltaan. Siksi GT Sophyn oikean urheiluetiketin varmistaminen on sen kehittäjien prioriteetti.

Kilpa-ajossa sinun on varmistettava, että ajat aggressiivisesti, koska haluat voittaa, mutta samalla haluat ajaa reilusti. Sony AI COO Michael Spranger kertoo Digital Trendsille. ”Et voi törmätä muihin autoihin saadaksesi etua ja on varmistettava, että kaikki voivat kilpailla reilusti. Se on mielenkiintoinen alue, koska nämä säännöt ovat melko epätarkkoja. siellä on sääntökirja, mutta se vaatii tuomareiden tulkinnan. Tämän oikean saaminen – aggressiivinen ja kilpailukykyinen ajaminen reilun ajoa vastaan ​​– on yksi GT Sophyn suurista haasteista.

Suositellut videot

Sony AI, Sony Interactive Entertainment ja Polyphony Digital ovat vahvistaneet, että pelaajat voivat kilpailla GT Sophylla rajoitetun ajan Gran Turismo 7 tila alkaa 21. helmikuuta. Päästäkseen tähän pisteeseen sen kehittäjät tekivät paljon työtä jalostaakseen paitsi GT Sophyn taitoja vahvistusoppimisen avulla, myös sen etikettiä kohti epämääräisiä kohteliaisuuslähtöisiä sääntöjä. Ennen sen lisäystä Gran Turismo 7, Digital Trends puhui Sony AI COO Michael Sprangerin ja GT Sophy -projektin johtajan Peter Wurmanin kanssa saadakseen lisätietoja heidän eettinen lähestymistapansa GT Sophyn urheilijamaiseen käyttäytymiseen ja mitä tulevaisuutta he näkevät tälle teknologialle pelaaminen.

Seuraava haastattelu on muokattu lyhyyden ja selkeyden vuoksi.

Mikä teki Gran Turismosta houkuttelevimman vaihtoehdon kehittää edistynyt tekoäly ensiksi?

Pääkuva Sonyn tekoälyn COO Michael Sprangerista, PhD.
Michael Spranger, PhD, Sony AI: n COO

Michael Spranger: Se johtui siitä, että se oli mahdollista ja koska Gran Turismo on todella jännittävä peli. Gran Turismo on ollut osa PlayStationia alusta asti. Se on ikoninen peli, joka tarjoaa fyysisen realismin, strategian, päätöksenteon ja urheiluetiketin erityisen haastealueen. Lisäksi sillä on suuri yleisö, joka todella seuraa peliä, ja tämä tarkoittaa, että millä tahansa pelissä kehittämällämme tekniikalla voi olla potentiaalisesti merkittävä vaikutus miljooniin pelaajiin. Pidän myös pelistä. Nämä asiat yhdessä saivat meidät valitsemaan Gran Turismon yhdeksi ensimmäisistä pelitekoälyprojektien kohteista.

Kuinka vahvistusoppiminen antaa tämän tekoälylle mahdollisuuden ottaa enemmän riskejä tai ajaa vaikuttavammin kuin tavallinen pelisi tekoäly? Yritetäänkö se vain ajaa tarkinta kilpalinjaa?

Peter Wurman: Taitotasoja on erilaisia. Lähtötilanne ajaa nopeammin radalla, joten vahvistusoppiminen toimii antamalla tekoälyagentin tutkia, mikä vaikutus toiminnallaan on maailmaan, ja yrittää sitten maksimoida palkkionsa. Antamalla sille positiivisia signaaleja nopeammasta radalla ajamisesta, se oppii ajamaan radalla erittäin nopeasti. Se oppii painamaan kaasupoljinta ja murtautumaan mutkissa, jotta se ei kaadu, mikä toimii erinomaisesti harjoittelemaan sitä aika-ajotilanteessa.

Tehdäksesi siitä todella a kilpailukykyinen kilpailija, meidän piti antaa sille muita palkitsemissignaaleja ohittavista autoista, jotka ovat sen edessä, eivätkä estäneet sen takana olevia autoja ohittamasta sitä. Annoimme sille myös rangaistuksia törmäyksestä tai törmäyksestä muihin autoihin. Tämä palkintojen ja rangaistusten yhdistelmä vaati jonkin verran vaivaa päästäkseen oikeaan, mutta kun harjoittelimme oikean vastustajajoukon kanssa, se oppi olemaan erittäin tehokas kilpailija.

Pääkuva GT Sophy -projektin johtajasta ja Sony AI American johtajasta Peter Wurmanista.
Peter Wurman, PhD, Sony AI American johtaja ja GT Sophyn projektipäällikkö

Mitkä olivat suurimmat opit parista ensimmäisestä Race Together -tapahtumasta, jotka pidit huippujen kanssa Gran Turismo Sport pelaajat?

Peter Wurman: Jos olet seurannut projektia, tiedät, että kilpailuja oli kaksi. Ensimmäisessä onnistuimme hyvin, mutta emme voittaneet joukkuepistettä. Jotkut niistä mielenkiintoisista asioista, joita opimme siitä, liittyivät itsevarmuuden ja hyvän urheilun tasapainon löytämiseen. Saimme selville kaksi viikkoa etukäteen, että kouluttamamme agentti oli liian aggressiivinen eikä hänen annettaisi kilpailla, joten meidän oli ryhdyttävä ja säädettävä asioita. Sinulla ei voi olla yhtä tekoälyagenttia, joka oli todella hyvä ajamaan nopeasti, ja toista, joka ajatteli ohittamisen taktisia puolia; sen sijaan meidän piti yhdistää ne yhdeksi yhtenäiseksi agentiksi, joka teki molempia samanaikaisesti. Nämä ovat asioita, joita näimme sen jälkeen Heinäkuun 2021 kilpailu, joten tunsimme olomme paljon itsevarmemmiksi menemällä sisään Lokakuun 2021 kilpailu.

Michael Spranger: Oli tämä asia, jossa meille kerrottiin, että se oli liian aggressiivista, mutta sitten ensimmäisenä näyttelykilpailupäivänä hävisimme kilpailun, koska emme olleet tarpeeksi aggressiivisia ja arkoja. Ongelma näiden asioiden tasapainottamisessa oli todella ilmeinen koko projektin kehityksen aikana.

Uusinta Gran Turismo Sophy Race Together -ottelusta Gran Turismo 7:ssä.

Mitä muutoksia GT Sophyyn piti tehdä, kun päätit lisätä sen Gran Turismo 7 eikä vain kouluta sitä testiympäristössä?

Peter Wurman: Suurin on, että kaikissa näyttelyissä GT Sophy kulki erillisellä tietokoneella ja puhui verkkoyhteyden kautta PlayStation-konsoliin. Täällä GT Sophy on upotettu peliin. Sen saaminen toimimaan PlayStationilla niillä resursseilla, jotka olivat käytettävissämme kaiken renderöinnin ja muun meneillään olevan tavaran jälkeen, oli vähän suunnittelutyötä.

Toinen asia on, että Polyphony Digital todella halusi agentin olevan erittäin hyvä esimerkki ajotyylistä ja -taidosta. Teimme joitain muutoksia kannustaaksemme GT Sophya pysymään linjoissa enemmän. Jos olet katsonut jonkin näyttelystä, huomaat, että se oli todella hyvä käyttämään koko radan, joskus laittamalla kaksi rengasta nurmikkoon. Se on laillista, mutta ei aivan sitä, mitä voit tehdä todellisessa kilpa-autossa. Teimme joitain muutoksia pitääksemme GT Sophyn enemmän rivien välissä. Se on edelleen erittäin nopea, mutta hieman puhtaampi.

Keskitymme enimmäkseen siihen, että yritämme noudattaa urheilullisuuden sääntöjä autourheilussa.

Mitkä ovat tärkeimmät asiat, joita Sony AI -tiimi toivoo oppivansa lisäämällä Gran Turismo Sophy Race Togetherin joukkoon Gran Turismo 7?

Peter Wurman: Pääasia on, että toivomme, että ihmiset nauttivat pelaamisesta sitä vastaan, kokevat olevansa todella haasteellisia kaikilla taitotasoilla ja oppivat tulemaan paremmin simuloituneiksi kilpa-auton kuljettajiksi.

Michael Spranger: Haluamme myös nähdä, kuinka ihmiset ovat vuorovaikutuksessa teknologian kanssa. Tällä hetkellä kourallinen ihmisiä on kokenut teknologian, joten olemme uteliaita näkemään, kuinka ihmiset aikovat käyttää tätä oppiakseen itsekseen, hankkiakseen uusia taitoja ja saadakseen uusia kokemuksia. Mielestäni se on monella tapaa projektin ydin. Meillä on teknologian läpimurto, ja se on mielestäni todella tärkeää, mutta uskon, että avaamme aivan uuden vaiheen ihmisille ja Gran Turismolle. Sisäänrakennetulla tekoälyllä on monella tapaa melko kapea suorituskykyalue, ja voit ylittää sen, kun sinusta tulee keskitason kuljettaja jokaisessa vaikeudessa.

Jopa suhteellisen harvoilla rata-autoyhdistelmillä, jotka paljastimme täällä, siitä mitä voin tehdä, siihen, mitä jotkut huippupelaajat voivat tehdä, jokainen voi löytää todella mielenkiintoisen ottelun. Toivomme näkevämme tätä lisää ja kuinka ihmiset oppivat siitä. Joidenkin pelaajien on myös erittäin vaikea löytää hyviä vastustajia, ja ensimmäistä kertaa sinulla voi olla toistuvia vuorovaikutuksia arvokkaan vastustajan kanssa ilman, että sinun tarvitsee kutsua kaikkia ystäviäsi ja pyytää heitä tulemaan yhdessä. Se tulee olemaan jotain, jossa ihmiset voivat edistyä huomattavasti kehittyessään pelissä, koska he voivat saada näitä räätälöityjä kokemuksia jossain määrin.

Ensimmäisen persoonan näkökulma Gran Turismo Sophy Race Together -kilpailuun Gran Turismo 7:ssä.

Asioiden eettiseltä puolelta, voitko selittää prosessin, jolla määritetään GT Sophyn urheilijamaista käytöstä, jotta se ei häiritse tiettyjä pelaajia?

Peter Wurman: Hyvin, se ei voi puhua sinulle, joten on monia huonoja asioita, joita GT Sophy ei voi tehdä, koska se ei ole osa peliä. Olemme enimmäkseen keskittyneet yrittämään noudattaa urheilullisuuden sääntöjä autokilpailuissa; nyt ne ovat aika hämäriä. Et voi estää laillista ohitusmahdollisuutta ja vastaavia. Näissä säännöissä on joukko sumeita sanoja, joita oli vaikea koodata ja ohjelmoida, joten meidän oli lähennettävä se palkintosignaaleilla ja rangaistuksilla, jos se teki esimerkiksi törmäyksen toiseen autoon.

Sitten meidän piti antaa se Polyphony Digitalille ja testikuljettajille ja antaa heidän antaa meille palautetta, koska muita tekoälyagentteja vastaan ​​ei todellakaan näytä meille, onko se valmis kilpailemaan monenlaista ihmiskilpaa vastaan tyylejä. Se vaati hieman vaivaa ja iterointia saadakseen asian oikein.

Michael Spranger: Tämän julkaisun osalta mielestäni on reilua sanoa, että se on kilpailukykyinen. Se yrittää ohittaa pelaajat, mutta se ei aio pommittaa heitä. Se on kilpailukykyistä, mutta kohteliasta. Se varmasti painostaa sinua; näet sen taustapeileistä yrittäessäsi ohittaa sinut. Samalla se yrittää antaa sinulle tilaa, jotta voit kilpailla kilpailukykyisesti mutta reilusti.

Peter Wurman: Mutta jos teet sotkun, siitä on hyötyä.

Michael Spranger: Aivan oikein, heti!

Gran Tursimo Sophy Race Together -tilan kilpailuvaihtoehtovalikko Gran Turismo 7:ssä.

Missä näet GT Sophyn ja tekoälytekniikan Sonyn peleissä menevän seuraavan viiden vuoden aikana?

Michael Spranger: Emme tietenkään voi ilmoittaa mitään erikseen, mutta yleensä siinä on useita kerroksia. Gran Turismossa on vielä haasteita ja asioita, joita voimme tehdä uusien kokemusten avaamiseksi, enkä usko, että olemme valmiita siihen. On todella jännitystä viedä tekniikkaa eteenpäin. Sitten Sonyn tekoälyn näkökulmasta yritysten T&K-toimintaan ja strategisiin aloitteisiin olemme todella innoissamme siitä, mitä tämä tekniikka voi tuoda pelaamiseen yleensä.

Muut pelit antavat meille erilaisen haasteen voitettavana ja edistävät teknologian ominaisuuksia. Se on nouseva teknologia, jolla on ollut menestystä aiemmin, mutta mielestäni se, mitä teemme täällä, on aivan erilaista tunnemme, että teemme tieteellisiä läpimurtoja, mutta sitten otamme sen käyttöön ja varmistamme, että ihmiset saavat käsiinsä tekoälyä teknologiaa. Tämä vie tekniikkaa eteenpäin ja avaa suurempia kokemuksia.

Vuorovaikutus on PlayStationin ydin, ei ole virhe, että sitä kutsutaan nimellä Sony Interactive Entertainment. Kyse on todella siitä, millainen on vuorovaikutuksesi pelistä löytämiesi asioiden kanssa, ja minusta tuntuu, että tämä on teknologialla on potentiaalia todella avata seuraavan sukupolven pelejä, ja olemme todella innoissamme että.

Toimittajien suositukset

  • CES 2023: Gran Turismo 7 tulee PS VR2:lle julkaisupelinä
  • Gran Turismo 7 muuttaa luottomaksuja vastareaktion jälkeen
  • Gran Turismo 7:ssä on museo autohistorian ystäville