據(jù)英國《每日郵報》6月14日報道,國際足聯(lián)世界杯將于14日開賽,目前研究人員已創(chuàng)建出一種可以將足球比賽視頻轉(zhuǎn)化爲(wèi)3D全息圖的AI,該技術(shù)可以將YouTube視頻投射到桌面,將其重構(gòu)爲(wèi)3D圖像。研究人員說,佩戴任何3D或AR設(shè)備便可觀看。
來自華盛頓大學(xué)、臉書和谷歌的研究人員創(chuàng)建了第一個端到端的深度學(xué)習(xí)系統(tǒng),將YouTube上的足球比賽視頻轉(zhuǎn)化爲(wèi)動態(tài)的3D全息圖。他們從國際足聯(lián)比賽視頻中提取了12000張球員的2D圖像,然後使用3D數(shù)據(jù)進行卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練。研究人員說,重塑足球比賽視頻並拒絕易,面臨著許多挑戰(zhàn)。他們在描述這項工作的一項新研究中寫道:“我們在線必須估計攝像機相對于比賽場地的位置與角度,對每個球員進行檢測和追蹤,重構(gòu)他們的體型和姿勢,並進行組合重建!
該系統(tǒng)能夠準(zhǔn)確預(yù)測深度圖,並將其與彩色膠片相結(jié)合,以3D形式重構(gòu)每個球員。但是,目前足球的重構(gòu)仍在進行中。他們寫道:“我們在線實現(xiàn)了首個端到端系統(tǒng)的目標(biāo),但足球的重構(gòu)還未實現(xiàn),這是未來繼續(xù)努力的方向。”
研究人員將比賽重置于虛擬的足球場上,在世界上任何地點通過3D或AR設(shè)備便可以從多種角度觀看比賽。他們使用微軟的全息透鏡智能眼鏡進行了測試,盡管該系統(tǒng)只適用于合成的比賽視頻,但他們在YouTube上找了十個高辨別率的職業(yè)足球比賽視頻,對其進行了測試,結(jié)果非常好。