Tento algoritmus premení hry Svetového pohára na rozšírenú realitu 3D

Svetový pohár mužov sa začína už tento týždeň. Akokoľvek vzrušujúce to sľubuje, väčšina z nás ho bude môcť sledovať iba na plochých televíznych prijímačoch, na rozdiel od trojrozmerného zážitku vidieť ho naživo a osobne. Vedci z Washingtonskej univerzity majú prísť s alternatívou rozšírenej reality. Aj keď pravdepodobne nebude k dispozícii pre masy včas na tohtoročný turnaj, naznačuje to jeden spôsob, akým si fanúšikovia doma môžu v budúcnosti užiť športové hry.

To, čo výskumníci vyvinuli, je algoritmus strojového učenia schopný transformovať 2D futbalové klipy na 3D rekonštrukcie, ktoré je možné prezerať pomocou slúchadiel AR, ako je napr. HoloLens od Microsoftu. Výsledky umožňujú divákom premeniť ploché povrchy, ako je ich pracovný stôl alebo kuchynský stôl, na virtuálne ihrisko, doplnené o trojrozmernú akciu, ktorú môžete krúžiť a pozerať sa z rôznych uhlov.

Odporúčané videá

Nie je to úplne ekvivalent osobného sledovania, ale je to oveľa bližšie ako bežná televízia. A tiež výrazne lacnejšie!

Súvisiace

  • Všetky dôvody, prečo som nadšený (a znepokojený) headsetom Reality Pro od Apple
  • Nové herné notebooky Acer sú vybavené mini-LED, 3D displejom a dostupnými cenami
  • Čo je AMD 3D V-Cache? Odomknutý extra herný výkon

„Naším cieľom je zlepšiť zážitok zo sledovania športu,“ Konstantinos Rematas, jeden z výskumníkov projektu, povedal pre Digital Trends. „Namiesto sledovania futbalového zápasu alebo hlavných momentov na plochej 2D obrazovke konvertujeme pôvodné video do 3D a vizualizujeme ho v rozšírenej realite. Hra sa v podstate stáva hologramom, kde sa môžete pohybovať a pozerať sa z rôznych uhlov pohľadu, čím vytvárate pohlcujúcejší zážitok.“

Konstantinos Rematas

Algoritmus generujúci zážitok AR vyžaduje ako vstup iba jedno futbalové video na YouTube. Pretože to nie je dostatok informácií na trénovanie celého systému vykresľovania na „premenu“ 2D hráčov na 3D, neurónová sieť sa naučila odhadovať hĺbku hraním videohry EA. FIFA 2018. Použitím súhrnu týchto informácií dokáže dobre zmerať, kde sú hráči na ihrisku.

V súčasnosti sa na systéme stále pracuje. Napríklad lopta ešte nie je správne vykreslená (niečo, čo sa vo futbale ukazuje ako sakramentsky dôležité) a hráči zostávajú dvojrozmerné výrezy. Toto sú dve vylepšenia, o ktorých výskumníci dúfajú.

"Ďalšie kroky sú o zvýšení kvality rekonštrukcie hry," pokračoval Rematas. „Chceme presne odhadnúť umiestnenie lopty a lepšie zrekonštruovať hráčov — oklúzie, plný 3D tvar odhad [a ďalšie].“ Okrem toho výskumníci plánujú rozšíriť rámec aj na ďalšie športy, ako je basketbal, hokej a futbal.

Papier popis práce je k dispozícii na prečítanie online.

Odporúčania redaktorov

  • Apple Vision Pro by mohol získať tento neuveriteľný herný upgrade
  • Headset Reality Pro od Apple sa môže spustiť skôr, než ktokoľvek očakával
  • Headset Reality Pro od Apple je „poslednou nádejou“ odvetvia VR
  • Šéf Apple hovorí, že AR „môže byť ešte lepšia ako len skutočný svet“
  • Apple môže teraz konečne prijať metaverse

Zlepšite svoj životný štýlDigitálne trendy pomáhajú čitateľom mať prehľad o rýchlo sa rozvíjajúcom svete technológií so všetkými najnovšími správami, zábavnými recenziami produktov, užitočnými úvodníkmi a jedinečnými ukážkami.