2018年06月13日,備受期待的世界杯將在本周開幕。盡管比賽毫無疑問會非常精彩,但我們大多數(shù)人都只能在平面電視機上觀看。不過,華盛頓大學的研究人員提出了一種增強現(xiàn)實替代方案。盡管可能無法趕在今年世界杯為大眾提供服務,但這預告了球迷在未來享受體育賽事的新方式。
研究人員開發(fā)了一種能夠將2D足球片段移植為3D重建內容的機器學習算法,而觀眾可以利用微軟HoloLens等AR頭顯欣賞比賽。這種技術可以支持觀眾將桌面或地面等平坦表面變成虛擬球場,然后系統(tǒng)將渲染相應的3D內容,從而支持你從不同角度進行觀看。
這不能等同于在現(xiàn)場觀影賽事,但顯然比平面電視更加接近。而且更重要的是,這可比現(xiàn)場觀賽的成本更低。
項目的一位研究人員康斯坦丁諾斯·里馬塔斯(Konstantinos Rematas)表示:“我們的目標是提升體育賽事的觀影體驗。不再需要在平面2D屏幕上觀看足球比賽或球場,而是將原始視頻移植為3D,并在增強現(xiàn)實中將其視覺化出來。比賽從根本上變成了全息圖,而你可以四處走動并從不同的角度欣賞賽事,從而帶來更逼真的體驗。”
作為輸入,他們研發(fā)的算法只需一段YouTube足球視頻。由于這無法提供沒有足夠的信息來訓練渲染系統(tǒng)將2D球員“升頻”為3D,所以研究人員通過神播放游玩《FIFA 2018》游戲的視頻來幫助神經網絡估計深度。利用所有這一切信息,系統(tǒng)可以相對精確地判斷球員在球場上的位置。
目前項目仍在開發(fā)之中。例如,球沒有被正確地渲染(這對于足球比賽而言非常重要),而且球員仍然是2D裁剪。研究人員希望未來可以在這兩方面取得進步。
里馬塔斯繼續(xù)道:“接下來我們要提高比賽重建的質量。特別地,我們希望精確估計球的位置并且更好地重建球員,如遮擋,完整的3D形狀估計等等。”此外,研究人員計劃擴展至其他運動,如籃球,曲棍球和足球。
榜單收錄、高管收錄、融資收錄、活動收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報生成中...