Ta algoritem spremeni igre svetovnega prvenstva v 3D razširjeno resničnost

Ta teden se začenja svetovno prvenstvo za moške. Kljub razburljivemu, kot obljublja, da ga bo večina od nas lahko gledala le na ploščatih televizijskih sprejemnikih, v nasprotju s tridimenzionalno izkušnjo ogleda v živo in osebno. Raziskovalci z univerze v Washingtonu so vendarle najti alternativo razširjene resničnosti. Čeprav verjetno še ne bo na voljo množicam pravočasno za letošnji turnir, namiguje na način, kako bodo navijači doma morda lahko uživali v športnih igrah v prihodnosti.

Raziskovalci so razvili algoritem strojnega učenja, ki je sposoben preoblikovati 2D nogometne posnetke v 3D rekonstrukcije, ki si jih je mogoče ogledati z uporabo slušalk AR, kot je Microsoftov HoloLens. Rezultati gledalcem omogočajo, da ravne površine, kot je pisalna ali kuhinjska miza, spremenijo v navidezno igrišče, skupaj s tridimenzionalnim dogajanjem, po katerem lahko krožite in si ga ogledate iz različnih zornih kotov.

Priporočeni videoposnetki

To ni povsem enakovredno osebnemu gledanju, vendar je veliko bližje kot običajni TV. In tudi bistveno ceneje!

Povezano

  • Vsi razlogi, zakaj sem navdušen (in zaskrbljen) nad Applovimi slušalkami Reality Pro
  • Acerjevi novi igralni prenosniki imajo mini-LED, 3D zaslone in dostopne cene
  • Kaj je AMD 3D V-Cache? Odklenjena dodatna igralna zmogljivost

"Naš cilj je izboljšati izkušnjo gledanja športa," Konstantinos Rematas, eden od raziskovalcev na projektu, je povedal za Digital Trends. »Namesto gledanja nogometne tekme ali vrhuncev na ravnem 2D-zaslonu pretvorimo izvirni video v 3D in ga vizualiziramo v razširjeni resničnosti. V bistvu igra postane hologram, kjer se lahko premikate in gledate z različnih zornih kotov, kar ustvarja bolj poglobljeno izkušnjo.«

Konstantinos Rematas

Algoritem, ki ustvarja izkušnjo razširjene resničnosti, kot svoj vhod zahteva samo en YouTube nogometni video. Ker to ni dovolj informacij za usposabljanje celotnega sistema upodabljanja za "pretvorbo" 2D predvajalnikov v 3D, se je nevronska mreža naučila oceniti globino z igranjem videoigre EA FIFA 2018. Z uporabo vseh teh informacij lahko opravi sprejemljivo nalogo natančnega merjenja, kje so igralci na igrišču.

Trenutno je sistem še v delu. Na primer, žoga še ni pravilno upodobljena (nekaj, kar se v nogometu izkaže za zelo pomembno) in igralci ostajajo dvodimenzionalni izrezki. To sta dve izboljšavi, ki ju raziskovalci upajo narediti.

"Naslednji koraki se nanašajo na povečanje kakovosti rekonstrukcije igre," je nadaljeval Rematas. »Predvsem želimo natančno oceniti lokacijo žoge in bolje rekonstruirati igralce – okluzije, polna 3D oblika ocena [in še več].« Poleg tega nameravajo raziskovalci razširiti okvir tudi na druge športe, kot so košarka, hokej in nogomet.

Papir opis dela je na voljo za branje na spletu.

Priporočila urednikov

  • Appleov Vision Pro bi lahko dobil to neverjetno igralno nadgradnjo
  • Applove slušalke Reality Pro bodo morda predstavljene prej, kot je kdo pričakoval
  • Applove slušalke Reality Pro so "zadnje upanje" industrije VR
  • Applov šef pravi, da je AR "morda celo boljši od resničnega sveta"
  • Apple bo morda vendarle zdaj sprejel metaverzum

Nadgradite svoj življenjski slogDigitalni trendi bralcem pomagajo slediti hitremu svetu tehnologije z vsemi najnovejšimi novicami, zabavnimi ocenami izdelkov, pronicljivimi uvodniki in enkratnimi vpogledi v vsebine.