Tento algoritmus mění hry Světového poháru na rozšířenou 3D realitu

Tento týden začíná mistrovství světa mužů. Jakkoli to slibuje být vzrušující, většina z nás to bude moci sledovat pouze na plochých televizních přijímačích, na rozdíl od trojrozměrného zážitku vidět to naživo a osobně. Vědci z Washingtonské univerzity mají přijít s alternativou rozšířené reality. I když pravděpodobně nebude k dispozici pro masy včas pro letošní turnaj, naznačuje to jeden způsob, jak by si domácí fanoušci mohli v budoucnu užít sportovní hry.

To, co výzkumníci vyvinuli, je algoritmus strojového učení schopný transformovat 2D fotbalové klipy na 3D rekonstrukce, které lze prohlížet pomocí AR náhlavních souprav, jako je např. HoloLens od Microsoftu. Výsledky umožňují divákům proměnit ploché povrchy, jako je jejich pracovní stůl nebo kuchyňský stůl, na virtuální hřiště, doplněné o trojrozměrnou akci, kterou můžete kroužit a sledovat z různých úhlů.

Doporučená videa

Není to úplně ekvivalent osobního sledování, ale je to mnohem blíž než běžná televize. A také výrazně levnější!

Příbuzný

  • Všechny důvody, proč jsem nadšený (a obávám se) z headsetu Reality Pro od Apple
  • Nové herní notebooky Acer jsou vybaveny mini-LED, 3D displeji a dostupnými cenami
  • Co je AMD 3D V-Cache? Extra herní výkon odemčen

„Naším cílem je zlepšit zážitek ze sledování sportu,“ Konstantinos Rematas, jeden z výzkumníků na projektu, řekl Digital Trends. „Namísto sledování fotbalového zápasu nebo nejdůležitějších momentů na ploché 2D obrazovce převádíme původní video do 3D a vizualizujeme je v rozšířené realitě. Hra se v podstatě stává hologramem, kde se můžete pohybovat a dívat se z různých úhlů pohledu, čímž vytváříte pohlcující zážitek.“

Konstantinos Rematas

Algoritmus generující zážitek AR vyžaduje jako vstup pouze jedno fotbalové video na YouTube. Protože to není dostatek informací k trénování celého vykreslovacího systému, aby „převedl“ 2D přehrávače na 3D, neuronová síť se naučila odhadovat hloubku hraním videohry EA. FIFA 2018. S využitím souhrnu těchto informací může udělat obstojnou práci a přesně změřit, kde se hráči na hřišti nacházejí.

V současné době je systém stále ve vývoji. Například míč ještě není správně vykreslen (něco, co se ve fotbale ukazuje jako zatraceně důležité) a hráči zůstávají dvourozměrné výřezy. Toto jsou dvě vylepšení, která vědci doufají.

"Další kroky jsou o zvýšení kvality rekonstrukce hry," pokračoval Rematas. „Především chceme přesně odhadnout umístění míče a lépe rekonstruovat hráče — okluze, plný 3D tvar odhad [a další].“ Kromě toho vědci plánují rozšířit rámec také na další sporty, jako je basketbal, hokej a Fotbal.

Papír popisující dílo je k dispozici ke čtení online.

Doporučení redakce

  • Apple Vision Pro by mohl získat tento neuvěřitelný herní upgrade
  • Headset Reality Pro od Apple se možná spustí dříve, než kdokoli čekal
  • Headset Reality Pro společnosti Apple je „poslední nadějí“ odvětví VR
  • Šéf Applu říká, že AR „může být ještě lepší než jen skutečný svět“
  • Apple možná nyní metaverze přijme

Upgradujte svůj životní stylDigitální trendy pomáhají čtenářům mít přehled o rychle se měnícím světě technologií se všemi nejnovějšími zprávami, zábavnými recenzemi produktů, zasvěcenými úvodníky a jedinečnými náhledy.