GT Sophy geliştiricileri yapay zekanın sportmenliğe benzer davranışı nasıl öğrettiğini açıklıyor

Teknolojinin ilk önemli kamuya açık sunumu olarak Sony Yapay Zeka2020 yılında kurulan, yakında çıkacak olan Gran Turismo Sophy Birlikte Yarış modu Gran Turismo 7 bu, birçok oyuncunun Sony Interactive Entertainment'ın birçok oyunu üzerinde kalıcı bir etki yaratabilecek karmaşık yapay zeka teknolojisiyle ilk tanışması olacak. Bu nedenle, yapay zeka birçok oyuncu için kaba, adaletsiz ve yenilmezse, GT Sophy, yapay zekanın henüz prime time'a hazır olmadığına dair bir başka uyarı işareti olarak görülebilir. Bu nedenle GT Sophy'nin uygun spor görgü kurallarına sahip olmasını sağlamak, geliştiricileri için bir önceliktir.

Yarışırken agresif bir şekilde sürdüğünüzden emin olmalısınız çünkü kazanmak istiyorsunuz ama aynı zamanda adil bir şekilde sürmek istiyorsunuz." Sony AI COO'su Michael Spranger, Digital Trends'i anlatıyor. "Bir avantaj elde etmek için diğer arabalarla karşılaşamazsınız ve herkesin adil bir şekilde rekabet edebildiğinden emin olmanız gerekir. Bu ilginç bir alan çünkü bu kurallar oldukça kesin değil; Bir kural kitabı var ama hakimlerin yorumuna ihtiyacı var. Bunu doğru yapmak (adil sürüş yerine agresif ve rekabetçi sürüş) GT Sophy'nin en büyük zorluklarından biri."

Önerilen Videolar

Sony AI, Sony Interactive Entertainment ve Polyphony Digital, oyuncuların sınırlı bir süre içinde GT Sophy ile yarışabileceklerini doğruladı Gran Turismo 7 Modu 21 Şubat'ta başlıyor. Bu noktaya gelebilmek için geliştiriciler, GT Sophy'nin pekiştirmeli öğrenme yoluyla yalnızca becerisini geliştirmekle kalmadı, aynı zamanda nezaket odaklı bir dizi belirsiz kurala yönelik görgü kurallarını da geliştirdi. Eklenmeden önce GranTurismo7, Digital Trends, daha fazla bilgi edinmek için Sony AI COO'su Michael Spranger ve GT Sophy Proje Lideri Peter Wurman ile görüştü. GT Sophy'nin sportmenlik davranışlarına yönelik etik yaklaşımları ve bu teknolojinin gelecekte ne gibi kullanımlar göreceğini oyun.

Aşağıdaki röportaj kısa ve net olması açısından düzenlenmiştir.

Gran Turismo'yu ilk etapta gelişmiş bir yapay zeka geliştirmek için en çekici seçenek haline getiren şey neydi?

Sony AI COO'su PhD Michael Spranger'ın vesikalık fotoğrafı.
Michael Spranger, PhD, Sony AI COO'su

Michael Spranger: Bunun nedeni mümkün olmasıydı ve Gran Turismo gerçekten heyecan verici bir oyundu. Gran Turismo en başından beri PlayStation'ın bir parçasıydı. Fiziksel gerçekçilik, strateji, karar verme ve spor görgü kurallarının bu özel meydan okuma alanını sağlayan ikonik bir oyundur. Ayrıca oyunu gerçekten takip eden büyük bir insan kitlesi var ve bu da oyunda geliştirdiğimiz herhangi bir teknolojinin milyonlarca oyuncu üzerinde potansiyel olarak anlamlı bir etkiye sahip olabileceği anlamına geliyor. Ben de oyunu seviyorum. Tüm bunların birleşimi, oyun yapay zekası projelerinde ilk hedeflerden biri olarak Gran Turismo'yu seçmemize neden oldu.

Takviyeli öğrenme, bu yapay zekanın standart oyun yapay zekanızdan daha fazla risk almasına veya daha etkileyici bir şekilde ilerlemesine nasıl olanak tanıyor? Sadece en hassas yarış çizgisini sürmeye mi çalışıyor?

Peter Wurman: Farklı beceri seviyeleri vardır. Temel çizgi pistte daha hızlı ilerliyor, bu nedenle takviyeli öğrenme, yapay zeka aracısının eylemlerinin dünya üzerindeki etkisini keşfetmesine ve ardından ödülünü en üst düzeye çıkarmaya çalışmasına izin vererek çalışır. Pistte daha hızlı gitmesi için olumlu sinyaller vererek, pistte çok hızlı gitmeyi öğrenir. Çarpmamak için gaz pedalına basmayı ve köşelere girmeyi öğreniyor; bu, onu zamana karşı deneme senaryosu için eğitmek için harika çalışıyor.

Aslında bunu bir hale getirmek için rekabetçi yarışçı, önündeki arabaları geçmesi ve arkasındaki arabaların onu geçmesini engellememesi için ona başka ödül sinyalleri vermemiz gerekiyordu. Ayrıca diğer arabalara çarpma veya çarpma durumlarında da cezalar verdik. Ödül ve cezalardan oluşan bu kombinasyonun doğru olması biraz çaba gerektirdi, ancak doğru sayıda rakiple antrenman yaptığımızda, çok etkili bir yarışçı olmayı öğrendi.

GT Sophy Proje Lideri ve Sony AI Amerika Direktörü Peter Wurman'ın vesikalık fotoğrafı.
Peter Wurman, PhD, Sony AI America Direktörü ve GT Sophy Proje Lideri

En iyilerle birlikte düzenlediğiniz ilk birkaç Race Together etkinliğinden edindiğiniz en büyük dersler nelerdi? Gran Turismo Sport oyuncular?

Peter Wurman: Projeyi takip ettiyseniz iki yarış olduğunu bileceksiniz. İlkinde iyi iş çıkardık ama Takım Skorunu alamadık. Bundan öğrendiğimiz ilginç şeylerden bazıları, atılganlık ile iyi bir spor yapma arasındaki dengeyi bulmakla ilgiliydi. İki hafta önce eğittiğimiz menajerin çok agresif olduğunu ve yarışmasına izin verilmeyeceğini öğrendik, bu yüzden çabalayıp bazı şeyleri ayarlamamız gerekti. Hızlı sürme konusunda gerçekten iyi olan bir yapay zeka ajanına ve pas vermenin taktiksel yönlerini düşünen bir başkasına sahip olamazsınız; bunun yerine bunları, her ikisini de aynı anda yapan tutarlı bir aracıda bir araya getirmemiz gerekiyordu. Bunlar olaydan sonra gördüğümüz şeyler. Temmuz 2021 yarışıböylece içeriye girerken kendimizi çok daha güvende hissettik. Ekim 2021 yarışı.

Michael Spranger: Bize çok agresif olduğu söylenmişti ama ilk gösteri yarışı gününde aslında yeterince agresif ve çekingen olmadığımız için yarışı kaybettik. Bunları nasıl dengeleyeceğiniz sorunu, projenin gelişimi boyunca gerçekten belirgindi.

Gran Turismo 7'deki Gran Turismo Sophy Race Together maçının tekrarı.

GT Sophy'yi eklemeye karar verdiğinizde hangi değişikliklerin yapılması gerekiyordu? Gran Turismo 7 ve onu sadece bir test ortamında eğitmek değil mi?

Peter Wurman: En büyüğü, tüm sergilerde GT Sophy'nin ayrı bir bilgisayarda çalışması ve bir ağ bağlantısı üzerinden PlayStation konsoluyla konuşmasıdır. Burada GT Sophy oyuna dahil edilmiştir. Tüm render işlemlerinden ve diğer şeylerden sonra elimizdeki kaynaklarla bunun bir PlayStation'da çalışmasını sağlamak biraz mühendislik işiydi.

Diğer bir şey ise Polyphony Digital'in menajerin yarış tarzı ve yarış becerisi açısından son derece iyi bir örnek olmasını gerçekten istemesiydi. GT Sophy'nin çizgide daha fazla kalmasını teşvik etmek için bazı değişiklikler yaptık. Sergilerden herhangi birini izlediyseniz, pistin tamamını kullanmanın, bazen iki lastiği çimlere koymanın gerçekten iyi olduğunu göreceksiniz. Bu yasaldır ancak tam olarak gerçek bir yarış arabasında yapabileceğiniz şey değildir. GT Sophy'yi daha fazla ortada tutabilmek için bazı değişiklikler yaptık. Hala çok hızlı ama biraz daha temiz.

Çoğunlukla otomotiv yarışlarında sportmenlik kurallarına uymaya odaklanıyoruz.

Sony AI ekibinin Gran Turismo Sophy Race Together'ı ekleyerek öğrenmeyi umduğu ana şeyler nelerdir? Gran Turismo 7?

Peter Wurman: Bunlardan en önemlisi, insanların buna karşı oynamaktan keyif almalarını, tüm beceri seviyelerinde gerçekten zorlandığını hissetmelerini ve daha iyi simüle edilmiş yarış arabası sürücüleri olmayı öğrenmelerini umuyoruz.

Michael Spranger: Ayrıca insanların teknolojiyle nasıl etkileşime girdiğini de görmek istiyoruz. Şu anda teknolojiyi deneyimleyen bir avuç insan var, bu yüzden insanların bunu kendileri öğrenmek, yeni beceriler kazanmak ve yeni deneyimler edinmek için nasıl kullanacaklarını merak ediyoruz. Birçok açıdan projenin özünde bu olduğunu düşünüyorum. Teknoloji atılımına sahibiz ve bunun gerçekten önemli olduğunu düşünüyorum, ancak insanlar ve Gran Turismo için yepyeni bir aşamanın kilidini açtığımızı düşünüyorum. Yerleşik yapay zeka birçok açıdan oldukça dar bir performans aralığına sahiptir ve her zorlukta orta düzey bir sürücü olduğunuzda bunu aşabilirsiniz.

Burada açıkladığımız görece az sayıdaki pist-araba kombinasyonuyla bile, benim yapabileceklerimden en iyi oyuncuların bazılarının yapabileceklerine kadar herkes gerçekten ilginç bir eşleşme bulabilir. Bunlardan daha fazlasını görmeyi ve insanların bundan nasıl ders aldığını görmeyi umuyoruz. Bazı oyuncuların iyi rakipler bulması da çok zordur ve ilk kez değerli bir rakiple tekrarlanan etkileşimler, tüm arkadaşlarınızı çağırıp hepsinin gelmesini sağlamak zorunda kalmadan birlikte. Bu, insanların oyunda daha iyi olma konusunda çok fazla ilerleme kaydedebilecekleri bir şey olacak çünkü bir dereceye kadar bu özel deneyimlere sahip olabilirler.

Gran Turismo 7'deki Gran Turismo Sophy Race Together yarışının birinci şahıs bakış açısı.

İşin etik yönüne gelince, GT Sophy'nin belirli oyuncuları taciz etmemesi için sportmenlik davranışının nelerden oluştuğunu belirleme sürecini açıklayabilir misiniz?

Peter Wurman: Kuyu, seninle konuşamazYani GT Sophy'nin yapamayacağı pek çok kötü şey var çünkü bu oyunun bir parçası değil. Çoğunlukla otomotiv yarışlarında sportmenlik kurallarına uymaya odaklanıyoruz; bunlar oldukça belirsiz. Meşru bir geçiş fırsatını ve buna benzer şeyleri engelleyemezsiniz. Bu kurallarda kodlanması ve programlanması zor olan bir sürü belirsiz kelime var, bu yüzden başka bir arabaya çarpmak gibi şeyler yaparsa, ödül sinyalleri ve cezalarla bunu yaklaşık olarak hesaplamak zorunda kaldık.

Daha sonra bunu Polyphony Digital'e ve test sürücülerine vermemiz ve onların bize geri bildirimde bulunmalarına izin vermemiz gerekiyordu çünkü yarış diğer yapay zeka ajanlarına karşı mücadelesi bize, insan yarışlarının çeşitliliğine karşı yarışmaya hazır olup olmadığını göstermiyor stiller. Bunu doğru yapmak için biraz çaba ve tekrarlama gerekti.

Michael Spranger: Bu sürüm için rekabetçi olduğunu söylemenin adil olacağını düşünüyorum. Oyuncuları geçmeye çalışacak, ancak onları bombalamayacak. Rekabetçi ama kibar. Kesinlikle üzerinizde baskı yaratıyor; dikiz aynalarında seni geçmeye çalıştığını göreceksin. Aynı zamanda rekabetçi ama adil bir şekilde yarışabilmeniz için size biraz alan sağlamaya çalışacak.

Peter Wurman: Ama eğer ortalığı karıştırırsanız, bundan faydalanacaktır.

Michael Spranger: Bu doğru, anında!

Gran Tursimo Sophy Race Together modunun Gran Turismo 7'deki yarış seçeneği menüsü.

Önümüzdeki beş yıl içinde Sony oyunlarında GT Sophy ve AI teknolojisinin nerede olacağını görüyorsunuz?

Michael Spranger: Açıkçası spesifik olarak bir şey duyuramıyoruz ama genel olarak bunun birden fazla katmanı var. Gran Turismo'da yeni deneyimlerin kilidini açmak için hâlâ yapabileceğimiz zorluklar ve yapabileceğimiz şeyler var ve bununla işimizin bittiğini düşünmüyorum. Teknolojiyi daha da ileriye taşımak konusunda gerçek bir heyecan var. Ayrıca, kurumsal Ar-Ge ve stratejik girişimlere yönelik Sony AI perspektifinden bakıldığında, bu teknolojinin genel olarak oyunlara neler getirebileceği konusunda gerçekten heyecan duyuyoruz.

Diğer oyunlar bize üstesinden gelmemiz gereken farklı bir zorluk sunacak ve teknolojinin yeteneklerini geliştirecek. Bu, geçmişte bazı başarılara imza atmış, yeni ortaya çıkan bir teknoloji, ancak burada yaptığımızın gelecekte oldukça farklı olduğunu düşünüyorum. Bilimsel atılımlar yaptığımızı hissediyoruz ama aynı zamanda bunu dağıtıyoruz ve insanların yapay zekayı ele geçirmesini sağlıyoruz teknoloji. Bu, teknolojiyi ileriye taşıyacak ve daha büyük deneyimlerin kilidini açacak.

Etkileşim PlayStation'ın özündedir, buna Sony Interactive Entertainment denmesi bir hata değildir. Bu aslında oyunda bulduğunuz şeylerle olan etkileşiminizin ne olduğuyla ilgili ve bunun böyle olduğunu hissediyorum. teknolojinin yeni nesil oyunların kilidini açma potansiyeli var ve biz bu konuda gerçekten heyecanlıyız. O.

Editörlerin Önerileri

  • CES 2023: Gran Turismo 7, PS VR2'ye lansman oyunu olarak geliyor
  • Gran Turismo 7, tepkilerin ardından kredi ödemelerini değiştirecek
  • Gran Turismo 7'de araba tarihi meraklıları için bir müze bulunuyor