В качестве первого значительного публичного релиза технологии от Сони ИИ, которая была создана в 2020 году для предстоящего режима Gran Turismo Sophy Race Together для Гран Туризмо 7 Это будет первое знакомство многих игроков со сложной технологией искусственного интеллекта, которая может оказать долгосрочное влияние на многие игры Sony Interactive Entertainment. Таким образом, если ИИ груб, несправедлив и непобедим для многих игроков, GT Sophy можно рассматривать как еще один предупреждающий знак того, что ИИ еще не готов к прайм-тайму. Вот почему обеспечение соответствия GT Sophy спортивному этикету является приоритетом для ее разработчиков.
“В гонках вам нужно быть уверенным, что вы едете агрессивно, потому что вы хотите победить, но в то же время вы хотите водить машину честно». Главный операционный директор Sony AI Майкл Спрангер рассказал Digital Trends. «Вы не можете врезаться в другие машины, чтобы получить преимущество, и вам нужно убедиться, что каждый может честно конкурировать. Это интересная область, потому что эти правила весьма неточны; Есть свод правил, но он требует интерпретации со стороны судей. Сделать это правильно — агрессивное и конкурентоспособное вождение вместо честного вождения — одна из самых больших задач GT Sophy».
Рекомендуемые видео
Sony AI, Sony Interactive Entertainment и Polyphony Digital подтвердили, что игроки смогут участвовать в гонках GT Sophy в течение ограниченного времени. Гран Туризмо 7 режим начиная с 21 февраля. Чтобы достичь этого момента, его разработчики проделали большую работу, оттачивая не только навыки GT Sophy с помощью обучения с подкреплением, но и его этикет в отношении туманного набора правил вежливости. В преддверии его добавления в Гран Туризмо 7, Представители Digital Trends поговорили с операционным директором Sony AI Майклом Спрангером и руководителем проекта GT Sophy Питером Вурманом, чтобы узнать больше о их этический подход к спортивному поведению GT Sophy и какое будущее они видят для этой технологии в игры.
Следующее интервью было отредактировано для краткости и ясности.
Что сделало Gran Turismo наиболее привлекательным вариантом для разработки продвинутого ИИ?
Майкл Спрангер: Это произошло потому, что это было возможно, и потому, что Gran Turismo — действительно захватывающая игра. Gran Turismo была частью PlayStation с самого начала. Это культовая игра, которая предлагает особую область задач, связанную с физическим реализмом, стратегией, принятием решений и спортивным этикетом. Кроме того, за игрой следит большая аудитория людей, а это означает, что любая технология, которую мы разрабатываем в игре, может оказать потенциально значимое влияние на миллионы игроков. Мне тоже нравится игра. В совокупности все это заставило нас выбрать Gran Turismo в качестве одной из первых целей для игровых проектов по искусственному интеллекту.
Как обучение с подкреплением позволяет этому ИИ идти на больший риск или вести себя более впечатляюще, чем ваш стандартный игровой ИИ? Это просто попытка проехать по максимально точной гоночной трассе?
Питер Вурман: Есть разные уровни мастерства. Базовый уровень движется быстрее по трассе, поэтому обучение с подкреплением позволяет агенту ИИ исследовать, какое влияние его действия оказывают на мир, а затем попытаться максимизировать свою награду. Подавая ему положительные сигналы о необходимости двигаться быстрее по трассе, он учится ездить по трассе очень быстро. Он учится нажимать на педаль газа и врываться в повороты, чтобы не разбиться, что отлично подходит для подготовки к гонкам на время.
Чтобы на самом деле сделать это конкурентоспособный гонщик, нам пришлось подавать ему другие сигналы вознаграждения за обгон автомобилей, находящихся перед ним, и не препятствовать прохождению автомобилей позади него. Мы также наложили штрафы за столкновения или наезды на другие автомобили. Для правильной реализации этой комбинации наград и наказаний потребовались некоторые усилия, но как только мы начали тренироваться с нужным количеством противников, мы научились быть очень эффективными гонщиками.
Какие самые важные уроки вы извлекли из первых двух мероприятий Race Together, которые вы провели вместе с топ-менеджерами? Гран Туризмо Спорт игроки?
Питер Вурман: Если вы следили за проектом, то знаете, что было две расы. В первом мы преуспели, но не выиграли командный зачет. Некоторые из интересных вещей, которые мы узнали из этого, были связаны с поиском баланса между напористостью и хорошим спортом. За две недели до этого мы узнали, что агент, которого мы обучили, слишком агрессивен и ему не разрешат участвовать в гонках, поэтому нам пришлось бороться и корректировать ситуацию. Не может быть одного ИИ-агента, который действительно хорош в быстрой езде, а другого, который думал о тактических аспектах прохождения; вместо этого нам пришлось объединить их в один связный агент, который делал бы и то, и другое одновременно. Вот что мы увидели после Гонка в июле 2021 г., поэтому мы чувствовали себя гораздо увереннее, входя в Октябрьская гонка 2021 г..
Майкл Спрангер: Был случай, когда нам сказали, что это слишком агрессивно, но затем в первый день показательных гонок мы фактически проиграли гонку, потому что были недостаточно агрессивны и робки. Проблема того, как сбалансировать эти вещи, была действительно очевидна на протяжении всего развития проекта.
Какие изменения пришлось внести в GT Sophy, когда вы приняли решение добавить его в Гран Туризмо 7 а не просто тренировать его в тестовой среде?
Питер Вурман: Самым большим является то, что на всех выставках GT Sophy работала на отдельном компьютере и общалась через сетевое соединение с консолью PlayStation. Здесь GT Sophy встроен в игру. Заставить его работать на PlayStation с использованием ресурсов, которые были доступны нам после всего рендеринга и других вещей, было небольшой инженерной работой.
Другое дело, что Polyphony Digital действительно хотела, чтобы агент был чрезвычайно хорошим примером гоночного стиля и гоночных навыков. Мы внесли некоторые изменения, чтобы побудить GT Sophy оставаться в рамках правил. Если вы смотрели какую-нибудь выставку, то увидите, что он действительно хорошо использовал всю трассу, иногда засовывая две шины в траву. Это законно, но не совсем то, что можно было бы сделать в настоящей гоночной машине. Мы внесли некоторые изменения, чтобы GT Sophy оставалась в центре внимания. Это по-прежнему очень быстро, но немного чище.
В основном мы сосредоточены на том, чтобы стараться соблюдать правила спортивного мастерства в автомобильных гонках.
Какие основные вещи команда Sony AI надеется извлечь из добавления Gran Turismo Sophy Race Together в Гран Туризмо 7?
Питер Вурман: Главный из них заключается в том, что мы надеемся, что людям понравится играть против него, они почувствуют, что им действительно брошен вызов на всех уровнях мастерства, и учатся лучше моделировать гонщиков.
Майкл Спрангер: Мы также хотим увидеть, как люди взаимодействуют с технологиями. На данный момент лишь горстка людей испытала эту технологию, поэтому нам любопытно посмотреть, как люди собираются использовать ее, чтобы учиться самостоятельно, приобретать новые навыки и получать новый опыт. Я думаю, что это во многом лежит в основе проекта. У нас есть технологический прорыв, и я думаю, что это действительно важно, но я думаю, что мы открываем совершенно новый этап для людей и в Gran Turismo. Во многих отношениях встроенный ИИ имеет довольно узкий диапазон производительности, и вы можете превзойти его, как только станете водителем среднего уровня на каждой сложности.
Даже несмотря на относительно небольшое количество комбинаций трековых машин, которые мы здесь представили, от того, что я могу сделать до того, что могут сделать некоторые из лучших игроков, каждый может найти действительно интересное сочетание. Мы надеемся увидеть больше этого и увидеть, как люди извлекут из этого уроки. Некоторым игрокам также очень сложно найти хороших противников, и впервые у вас может возникнуть повторяющиеся взаимодействия с достойным противником без необходимости звонить всем своим друзьям и приглашать их всех прийти вместе. Это будет то, где люди смогут добиться значительного прогресса в улучшении игры, потому что они смогут в некоторой степени получить этот индивидуальный опыт.
Что касается этической стороны, можете ли вы объяснить процесс определения того, что является спортивным поведением GT Sophy, чтобы оно не преследовало определенных игроков?
Питер Вурман: Хорошо, оно не может с тобой разговаривать, так что есть много плохих вещей, которые GT Sophy не может сделать, потому что это не часть игры. В основном мы сосредоточены на том, чтобы стараться соблюдать правила спортивного мастерства в автомобильных гонках; теперь это довольно туманно. Вы не можете заблокировать законную возможность паса и тому подобное. В этих правилах есть куча нечетких слов, которые сложно закодировать и запрограммировать, поэтому нам пришлось аппроксимировать их сигналами вознаграждения и штрафами, если они совершали такие действия, как столкновение с другой машиной.
Затем нам пришлось передать его Polyphony Digital и водителям-испытателям, чтобы они оставили нам отзывы, потому что гонки против других агентов ИИ на самом деле не показывает нам, готов ли он участвовать в гонках против множества человеческих гонок. стили. Чтобы сделать это правильно, потребовались некоторые усилия и итерации.
Майкл Спрангер: Что касается этого релиза, я думаю, будет справедливо сказать, что он конкурентоспособен. Он попытается обогнать игроков, но не собирается их пикировать. Это соревновательно, но вежливо. Это определенно оказывает на вас давление; вы увидите его в зеркалах заднего вида, пытающегося вас обогнать. В то же время он попытается дать вам немного места, чтобы вы могли участвовать в гонках конкурентоспособно, но честно.
Питер Вурман: Но если вы устроите беспорядок, он воспользуется этим.
Майкл Спрангер: Правильно, мгновенно!
Каким вы видите GT Sophy и технологии искусственного интеллекта в играх Sony в ближайшие пять лет?
Майкл Спрангер: Разумеется, мы не можем ничего конкретно анонсировать, но в целом здесь есть несколько слоев. В Gran Turismo все еще есть проблемы и вещи, которые мы можем сделать, чтобы открыть новые впечатления, и я не думаю, что мы на этом закончили. Существует настоящий энтузиазм по поводу дальнейшего развития этой технологии. Затем, с точки зрения Sony AI, корпоративных исследований и разработок, а также стратегических инициатив, мы очень воодушевлены тем, что эта технология может привнести в игры в целом.
Другие игры поставят перед нами новые задачи и расширят возможности технологии. Это новая технология, которая в прошлом имела определенные успехи, но я думаю, что то, что мы здесь делаем, совершенно отличается от других. смысл того, что мы совершаем научные прорывы, но затем мы также внедряем их и следим за тем, чтобы люди получили в свои руки ИИ. технологии. Это продвинет технологию вперед и откроет новые возможности.
Взаимодействие лежит в основе PlayStation, и не ошибка, что она называется Sony Interactive Entertainment. На самом деле речь идет о том, каково ваше взаимодействие с вещами, которые вы найдете в игре, и я чувствую, что это у технологии есть потенциал, чтобы действительно открыть новое поколение игр, и мы очень рады этому что.
Рекомендации редакции
- CES 2023: Gran Turismo 7 выйдет на PS VR2 в качестве стартовой игры
- Gran Turismo 7 изменит выплаты по кредитам из-за негативной реакции
- В Gran Turismo 7 есть музей для любителей истории автомобилей
