Този алгоритъм превръща игрите от Световната купа в 3D разширена реалност

Световната купа за мъже започва тази седмица. Колкото и вълнуващо да обещава да бъде обаче, повечето от нас ще могат да го гледат само на плоски телевизори, за разлика от триизмерното изживяване да го гледат на живо и лично. Изследователи от университета във Вашингтон имат все пак измислете алтернатива на разширената реалност. Въпреки че вероятно няма да бъде достъпен за масите навреме за тазгодишния турнир, той загатва за един начин, по който феновете у дома могат да се насладят на спортни игри в бъдеще.

Това, което изследователите са разработили, е алгоритъм за машинно обучение, способен да трансформира 2D футболни клипове в 3D реконструкции, които могат да се гледат с помощта на AR слушалки като HoloLens на Microsoft. Резултатите позволяват на зрителите да превърнат плоски повърхности като своето бюро или кухненска маса във виртуална площадка, допълнена с триизмерно действие, което можете да обиколите, за да видите от различни ъгли.

Препоръчани видеоклипове

Това не е еквивалентно на това да го гледате лично, но е много по-близо от обикновената телевизия. И значително по-евтин!

Свързани

  • Всички причини, поради които съм развълнуван (и притеснен) за слушалките Reality Pro на Apple
  • Новите лаптопи за игри на Acer разполагат с мини-LED, 3D дисплеи и достъпни цени
  • Какво е AMD 3D V-Cache? Отключена допълнителна производителност в игрите

„Нашата цел е да подобрим изживяването при гледане на спорт“, Константинос Рематас, един от изследователите по проекта, каза пред Digital Trends. „Вместо да гледаме футболен мач или акценти на плосък 2D екран, ние конвертираме оригиналното видео в 3D и го визуализираме в добавена реалност. По същество играта се превръща в холограма, където можете да се движите и да гледате от различни гледни точки, генерирайки по-завладяващо изживяване.

Константинос Рематас

Като вход, алгоритъмът, генериращ AR изживяването, изисква само един футболен видеоклип в YouTube. Тъй като това не е достатъчно информация, за да обучи цяла система за изобразяване да „преобразува“ 2D играчи в 3D, невронната мрежа се научи да оценява дълбочината, като играе видеоиграта на EA FIFA 2018. Използвайки съвкупността от тази информация, той може да свърши приемлива работа за точно измерване къде са играчите на терена.

В момента системата все още е в процес на работа. Например, топката все още не е изобразена правилно (нещо, което се оказва адски важно във футбола) и играчите остават двуизмерни изрезки. Това са две подобрения, които изследователите се надяват да направят.

„Следващите стъпки са за повишаване на качеството на реконструкцията на играта“, продължи Рематас. „По-конкретно, искаме да преценим точно местоположението на топката и да реконструираме по-добре играчите - оклузии, пълна 3D форма оценка, [и още].“ В допълнение, изследователите планират да разширят рамката, за да обхванат и други спортове като баскетбол, хокей и футбол.

Хартия описанието на работата е достъпно за четене онлайн.

Препоръки на редакторите

  • Vision Pro на Apple може да получи този невероятен гейминг ъпгрейд
  • Слушалките Reality Pro на Apple може да стартират по-рано от очакваното
  • Слушалките Reality Pro на Apple са „последната надежда“ на VR индустрията
  • Шефът на Apple казва, че AR „може да е дори по-добър от реалния свят“
  • В крайна сметка Apple може да прегърне метавселената сега

Надградете начина си на животDigital Trends помага на читателите да следят забързания свят на технологиите с всички най-нови новини, забавни ревюта на продукти, проницателни редакционни статии и единствени по рода си кратки погледи.