Questo algoritmo trasforma le partite della Coppa del Mondo in realtà aumentata 3D

Questa settimana cominciano i Mondiali maschili. Per quanto emozionante possa essere, tuttavia, la maggior parte di noi potrà guardarlo solo su televisori piatti, invece di vivere l'esperienza tridimensionale di vederlo dal vivo e di persona. Lo hanno riferito i ricercatori dell’Università di Washington trovare un'alternativa alla realtà aumentata, però. Anche se probabilmente non sarà disponibile al pubblico in tempo per il torneo di quest'anno, suggerisce un modo in cui i fan a casa potrebbero godersi i giochi sportivi in ​​futuro.

Ciò che i ricercatori hanno sviluppato è un algoritmo di apprendimento automatico in grado di trasformare clip di calcio 2D in ricostruzioni 3D, che possono essere visualizzate utilizzando visori AR come HoloLens di Microsoft. I risultati consentono agli spettatori di trasformare superfici piane come la scrivania o il tavolo della cucina in un campo virtuale, completo di azione tridimensionale su cui è possibile girare per vedere da diverse angolazioni.

Video consigliati

Non è esattamente l’equivalente di guardarlo di persona, ma è molto più vicino della normale TV. E anche decisamente più economico!

Imparentato

  • Tutti i motivi per cui sono entusiasta (e preoccupato) per le cuffie Reality Pro di Apple
  • I nuovi laptop da gioco di Acer sono dotati di mini-LED, display 3D e prezzi convenienti
  • Che cos'è la cache virtuale 3D AMD? Prestazioni di gioco extra sbloccate

“Il nostro obiettivo è migliorare l’esperienza visiva dello sport”, Konstantinos Rematas, uno dei ricercatori del progetto, ha detto a Digital Trends. “Invece di guardare una partita di calcio o gli highlights su uno schermo piatto 2D, convertiamo il video originale in 3D e lo visualizziamo in realtà aumentata. Essenzialmente il gioco diventa un ologramma, in cui puoi muoverti e guardare da diversi punti di vista, generando un'esperienza più coinvolgente."

Konstantinos Rematas

Come input, l'algoritmo che genera l'esperienza AR richiede un solo video di calcio di YouTube. Poiché queste informazioni non sono sufficienti per addestrare un intero sistema di rendering a "convertire" i giocatori 2D in 3D, la rete neurale ha imparato a stimare la profondità giocando al videogioco EA FIFA 2018. Utilizzando la totalità di queste informazioni, può svolgere un lavoro accettabile nel valutare accuratamente dove si trovano i giocatori in campo.

Al momento, il sistema è ancora in fase di elaborazione. Ad esempio, la palla non è ancora stata renderizzata correttamente (qualcosa che risulta essere piuttosto importante nel calcio) e i giocatori rimangono ritagli bidimensionali. Questi sono due miglioramenti che i ricercatori sperano di apportare.

"I prossimi passi riguarderanno l'aumento della qualità della ricostruzione del gioco", ha continuato Rematas. "In particolare, vogliamo stimare con precisione la posizione della palla e ricostruire meglio i giocatori: occlusioni, forma 3D completa stima, [e altro ancora]." Inoltre, i ricercatori intendono estendere il quadro per coprire anche altri sport come basket, hockey e calcio.

Un documento che descrive il lavoro è disponibile per la lettura online.

Raccomandazioni degli editori

  • Vision Pro di Apple potrebbe ottenere questo incredibile aggiornamento di gioco
  • Le cuffie Reality Pro di Apple potrebbero essere lanciate prima del previsto
  • Il visore Reality Pro di Apple è “l’ultima speranza” del settore VR
  • Il capo di Apple afferma che l’AR “potrebbe essere anche migliore del semplice mondo reale”
  • Dopotutto, Apple potrebbe abbracciare il metaverso

Migliora il tuo stile di vitaDigital Trends aiuta i lettori a tenere d'occhio il frenetico mondo della tecnologia con tutte le ultime notizie, divertenti recensioni di prodotti, editoriali approfonditi e anteprime uniche nel loro genere.