Twórcy GT Sophy wyjaśniają, jak uczyło to AI sportowego zachowania

Jako pierwsze znaczące publiczne wydanie technologii z sztuczna inteligencja Sony, który powstał w 2020 roku, nadchodzący tryb Gran Turismo Sophy Race Together dla Gran Turismo 7 będzie dla wielu graczy pierwszym kontaktem ze złożoną technologią sztucznej inteligencji, która może mieć trwały wpływ na wiele gier Sony Interactive Entertainment. W związku z tym, choć sztuczna inteligencja jest niegrzeczna, niesprawiedliwa i nie do pokonania dla wielu graczy, GT Sophy może być postrzegana jako kolejny sygnał ostrzegawczy, że sztuczna inteligencja nie jest jeszcze gotowa na premierę. Dlatego zapewnienie GT Sophy odpowiedniej etykiety sportowej jest priorytetem dla jej twórców.

W wyścigach musisz upewnić się, że jedziesz agresywnie, ponieważ chcesz wygrać, ale jednocześnie chcesz jechać uczciwie. Dyrektor operacyjny Sony AI, Michael Spranger, opowiada o trendach cyfrowych. „Nie można wpadać na inne samochody, aby zyskać przewagę i trzeba się upewnić, że każdy może uczciwie konkurować. To interesujący obszar, ponieważ zasady te są dość nieprecyzyjne; istnieje zbiór przepisów, ale wymaga on interpretacji ze strony sędziów. Właściwe wykonanie tego zadania – agresywna i konkurencyjna jazda w porównaniu z uczciwą jazdą – to jedno z największych wyzwań stojących przed GT Sophy”.

Polecane filmy

Sony AI, Sony Interactive Entertainment i Polyphony Digital potwierdziły, że gracze będą mogli ścigać się w GT Sophy przez ograniczony czas Gran Turismo 7 tryb rozpoczynający się 21 lutego. Aby dojść do tego punktu, twórcy włożyli wiele pracy, udoskonalając nie tylko umiejętności GT Sophy poprzez uczenie się przez wzmacnianie, ale także jej etykietę w kierunku mglistego zestawu zasad opartych na uprzejmości. Przed dodaniem do Gran Turismo 7, Aby dowiedzieć się więcej na temat tej technologii, firma Digital Trends rozmawiała z dyrektorem operacyjnym Sony AI Michaelem Sprangerem i kierownikiem projektu GT Sophy, Peterem Wurmanem o ich etycznym podejściu do sportowego zachowania GT Sophy i o tym, jakie przyszłość widzą dla tej technologii hazard.

Poniższy wywiad został zredagowany ze względu na zwięzłość i przejrzystość.

Co sprawiło, że Gran Turismo było najbardziej atrakcyjną opcją do opracowania zaawansowanej sztucznej inteligencji?

Zdjęcie głowy dyrektora operacyjnego Sony AI Michaela Sprangera, doktora.
Doktor Michael Spranger, dyrektor operacyjny Sony AI

Michael Spranger: Stało się tak, ponieważ było to możliwe i ponieważ Gran Turismo to naprawdę ekscytująca gra. Gran Turismo od samego początku jest częścią PlayStation. To kultowa gra, która zapewnia specyficzny obszar wyzwań realizmu fizycznego, strategii, podejmowania decyzji i etykiety sportowej. Ponadto gra ma dużą publiczność, złożoną z osób, które faktycznie śledzą grę, a to oznacza, że ​​każda technologia, którą opracujemy w grze, może mieć potencjalnie znaczący wpływ na miliony graczy. Ja też uwielbiam tę grę. Połączenie tych wszystkich czynników sprawiło, że wybraliśmy Gran Turismo jako jeden z pierwszych celów projektów AI w grach.

W jaki sposób uczenie się przez wzmacnianie pozwala tej sztucznej inteligencji podejmować większe ryzyko lub prowadzić bardziej imponująco niż standardowa sztuczna inteligencja w grze? Czy po prostu próbuje jechać jak najbardziej precyzyjną linią wyścigową?

Peter Wurman: Istnieją różne poziomy umiejętności. Podstawą jest szybsza jazda po torze, więc uczenie się przez wzmacnianie pozwala agentowi AI zbadać, jaki wpływ mają jego działania na świat, a następnie spróbować zmaksymalizować nagrodę. Dając mu pozytywne sygnały, aby jechał szybciej po torze, uczy się bardzo szybko jeździć po torze. Uczy się naciskać pedał gazu i wjeżdżać w zakręty, aby się nie rozbić, co świetnie sprawdza się w szkoleniu go do jazdy na czas.

Aby faktycznie to zrobić konkurencyjny zawodnik, musieliśmy dać mu inne sygnały nagrody za przejeżdżanie samochodów znajdujących się przed nim i nie uniemożliwianie wyprzedzania samochodom jadącym za nim. Nałożyliśmy także kary za kolizje lub wpadnięcia na inne samochody. Poprawne wykonanie tej kombinacji nagród i kar wymagało pewnego wysiłku, ale kiedy przeprowadziliśmy trening z odpowiednią grupą przeciwników, nauczył się być bardzo skutecznym kierowcą.

Zdjęcie głowy Petera Wurmana, kierownika projektu GT Sophy i dyrektora Sony AI America.
Doktor Peter Wurman, dyrektor Sony AI America i kierownik projektu GT Sophy

Jakie były najważniejsze wnioski z pierwszych kilku wydarzeń Race Together, które zorganizowaliście z topem? Sportowe Gran Turismo gracze?

Peter Wurman: Jeśli śledziłeś projekt, będziesz wiedział, że były dwa wyścigi. W pierwszym przypadku spisaliśmy się dobrze, ale nie udało nam się zdobyć wyniku drużynowego. Niektóre z interesujących rzeczy, których się z tego nauczyliśmy, dotyczyły znalezienia równowagi między asertywnością a byciem dobrym sportem. Dwa tygodnie wcześniej dowiedzieliśmy się, że wyszkolony przez nas agent był zbyt agresywny i nie będzie mógł się ścigać, więc musieliśmy się pokombinować i dostosować wszystko. Nie można mieć jednego agenta AI, który byłby naprawdę dobry w szybkiej jeździe, i drugiego, który myślałby o taktycznych aspektach podań; zamiast tego musieliśmy połączyć je w jeden spójny agent, który zajmowałby się obydwoma w tym samym czasie. To są rzeczy, które widzieliśmy po Wyścig w lipcu 2021 r, więc czuliśmy się znacznie pewniej, wchodząc do Wyścig w październiku 2021 r.

Michael Spranger: Był taki moment, w którym powiedziano nam, że jest zbyt agresywny, ale pierwszego dnia wyścigu pokazowego tak naprawdę przegraliśmy wyścig, ponieważ nie byliśmy wystarczająco agresywni i nieśmiali. Problem zrównoważenia tych rzeczy był naprawdę widoczny podczas opracowywania projektu.

Powtórka meczu Gran Turismo Sophy Race Together w Gran Turismo 7.

Jakie zmiany musiałeś wprowadzić w GT Sophy, kiedy podjąłeś decyzję o dodaniu go do Gran Turismo 7 a nie tylko szkolić go w środowisku testowym?

Peter Wurman: Największą jest to, że na wszystkich wystawach GT Sophy działała na osobnym komputerze i komunikowała się poprzez połączenie sieciowe z konsolą PlayStation. Tutaj GT Sophy jest osadzona w grze. Sprawienie, by działało na PlayStation przy użyciu zasobów, które były dla nas dostępne po całym renderowaniu i innych rzeczach, które miały miejsce, wymagało trochę pracy inżynieryjnej.

Inną sprawą jest to, że firmie Polyphony Digital naprawdę zależało na tym, aby agent był wyjątkowo dobrym przykładem wyścigowego stylu i umiejętności wyścigowych. Wprowadziliśmy pewne zmiany, aby zachęcić GT Sophy do częstszego trzymania się linii. Jeśli oglądałeś którąś z wystaw, zobaczysz, że naprawdę dobrze radziło sobie z wykorzystaniem całego toru, czasem kładąc dwie opony na trawie. To legalne, ale nie dokładnie to, co można zrobić w prawdziwym samochodzie wyścigowym. Wprowadziliśmy pewne zmiany, aby GT Sophy bardziej trzymała się między wierszami. Nadal jest bardzo szybki, ale trochę czystszy.

Skupiamy się głównie na przestrzeganiu zasad sportowej rywalizacji w wyścigach samochodowych.

Jakich głównych rzeczy zespół Sony zajmujący się sztuczną inteligencją ma nadzieję się nauczyć, dodając do gry Gran Turismo Sophy Race Together Gran Turismo 7?

Peter Wurman: Najważniejsze jest to, że mamy nadzieję, że ludzie będą czerpać przyjemność z gry przeciwko niemu, poczują, że stoją przed prawdziwym wyzwaniem na każdym poziomie umiejętności i uczą się, jak zostać lepiej symulowanymi kierowcami samochodów wyścigowych.

Michael Spranger: Chcemy także zobaczyć, jak ludzie wchodzą w interakcję z technologią. W tej chwili tylko garstka osób ma doświadczenie z tą technologią, dlatego jesteśmy ciekawi, jak ludzie zamierzają ją wykorzystać do samodzielnej nauki, zdobywania nowych umiejętności i zdobywania nowych doświadczeń. Myślę, że pod wieloma względami to jest sednem projektu. Mamy przełom technologiczny i myślę, że to naprawdę ważne, ale myślę, że otwieramy zupełnie nowy etap dla ludzi i w Gran Turismo. Pod wieloma względami wbudowana sztuczna inteligencja ma dość wąski zakres wydajności i możesz go przekroczyć, gdy zostaniesz kierowcą średniozaawansowanym na każdym poziomie trudności.

Nawet przy stosunkowo niewielkiej liczbie kombinacji pojazdów torowych, które tutaj zaprezentowaliśmy, od tego, co mogę zrobić ja, po to, co potrafią niektórzy z najlepszych graczy, każdy może znaleźć naprawdę interesujące dopasowanie. Mamy nadzieję zobaczyć więcej takich sytuacji i dowiedzieć się, jak ludzie się z tego uczą. Niektórym graczom bardzo trudno jest znaleźć dobrych przeciwników i po raz pierwszy jest to możliwe wielokrotne interakcje z godnym przeciwnikiem bez konieczności wzywania wszystkich znajomych i zapraszania ich wszystkich do przyjścia razem. Będzie to coś, w ramach czego ludzie będą mogli poczynić duże postępy w ulepszaniu gry, ponieważ będą mogli w pewnym stopniu korzystać z dostosowanych do ich potrzeb doświadczeń.

Perspektywa pierwszoosobowa wyścigu Gran Turismo Sophy Race Together w Gran Turismo 7.

Jeśli chodzi o kwestie etyczne, czy możesz wyjaśnić proces ustalania, co stanowi sportowe zachowanie GT Sophy, tak aby nie było to nękanie niektórych graczy?

Peter Wurman: Dobrze, nie może z tobą rozmawiać, więc jest wiele złych rzeczy, których GT Sophy nie może zrobić, ponieważ nie jest to częścią gry. Skupiamy się głównie na przestrzeganiu zasad sportowej rywalizacji w wyścigach samochodowych; teraz są dość mgliste. Nie możesz blokować uzasadnionej okazji do podania i tym podobnych. W tych zasadach jest mnóstwo niejasnych słów, które były trudne do zakodowania i zaprogramowania, więc musieliśmy przybliżyć je za pomocą sygnałów nagrody i kar, jeśli spowodowało to na przykład uderzenie w inny samochód.

Następnie musieliśmy przekazać go firmie Polyphony Digital i kierowcom testowym, aby mogli podzielić się z nami swoją opinią na temat wyścigów przeciwko innym agentom AI tak naprawdę nie pokazuje nam, czy jest gotowy na ściganie się z różnorodnością wyścigów ludzkich style. Poprawienie tego wymagało trochę wysiłku i powtórzeń.

Michael Spranger: Myślę, że w przypadku tego wydania można śmiało powiedzieć, że jest konkurencyjne. Będzie próbował wyprzedzić graczy, ale nie będzie ich bombardował. Jest konkurencyjny, ale uprzejmy. Zdecydowanie wywiera na ciebie presję; zobaczysz to w lusterkach wstecznych, gdy będzie próbował cię wyprzedzić. Jednocześnie spróbuje dać ci trochę miejsca, abyś mógł ścigać się konkurencyjnie, ale uczciwie.

Peter Wurman: Ale jeśli narobisz bałaganu, to na tym skorzysta.

Michael Spranger: Zgadza się, natychmiast!

Menu opcji wyścigu w trybie Gran Tursimo Sophy Race Together w Gran Turismo 7.

Jak według Ciebie będzie rozwijać się technologia GT Sophy i sztuczna inteligencja w grach Sony w ciągu najbliższych pięciu lat?

Michael Spranger: Oczywiście nie możemy ogłosić niczego konkretnego, ale ogólnie rzecz biorąc, jest to wiele warstw. Wciąż istnieją wyzwania i rzeczy, które możemy zrobić w Gran Turismo, aby odblokować nowe doświadczenia, i nie sądzę, że na tym skończyliśmy. Dalszy rozwój technologii budzi prawdziwą ekscytację. Z perspektywy korporacyjnych badań i rozwoju oraz inicjatyw strategicznych Sony związanych ze sztuczną inteligencją jesteśmy naprawdę podekscytowani tym, co ta technologia może ogólnie wnieść do gier.

Inne gry dadzą nam inne wyzwanie do pokonania i poszerzą możliwości technologii. To nowa technologia, która w przeszłości odniosła pewne sukcesy, ale sądzę, że to, co tu robimy, różni się od poczucie, że dokonujemy przełomowych odkryć naukowych, ale także je wdrażamy i upewniamy się, że ludzie dostaną sztuczną inteligencję w swoje ręce technologia. To popchnie technologię do przodu i zapewni lepsze doświadczenia.

Interakcja jest podstawą PlayStation i nie jest błędem nazwanie jej Sony Interactive Entertainment. Tak naprawdę chodzi o twoją interakcję z rzeczami, które znajdziesz w grze, i naprawdę tak uważam Technologia ma potencjał, aby naprawdę odblokować gry nowej generacji i jesteśmy tym naprawdę podekscytowani To.

Zalecenia redaktorów

  • CES 2023: Gran Turismo 7 pojawi się na PS VR2 jako gra premierowa
  • Gran Turismo 7 zmieni wypłaty kredytów w odpowiedzi na ostre protesty
  • W Gran Turismo 7 znajduje się muzeum dla miłośników historii motoryzacji