據(jù)英國(guó)《每日郵報(bào)》6月14日?qǐng)?bào)道,國(guó)際足聯(lián)世界杯將于14日開(kāi)賽,目前研究人員已創(chuàng)建出一種可以將足球比賽視頻轉(zhuǎn)化爲(wèi)3D全息圖的AI,該技術(shù)可以將YouTube視頻投射到桌面,將其重構(gòu)爲(wèi)3D圖像。研究人員說(shuō),佩戴任何3D或AR設(shè)備便可觀看。
來(lái)自華盛頓大學(xué)、臉書(shū)和谷歌的研究人員創(chuàng)建了第一個(gè)端到端的深度學(xué)習(xí)系統(tǒng),將YouTube上的足球比賽視頻轉(zhuǎn)化爲(wèi)動(dòng)態(tài)的3D全息圖。他們從國(guó)際足聯(lián)比賽視頻中提取了12000張球員的2D圖像,然後使用3D數(shù)據(jù)進(jìn)行卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練。研究人員說(shuō),重塑足球比賽視頻並拒絕易,面臨著許多挑戰(zhàn)。他們?cè)诿枋鲞@項(xiàng)工作的一項(xiàng)新研究中寫(xiě)道:“我們?cè)诰€必須估計(jì)攝像機(jī)相對(duì)于比賽場(chǎng)地的位置與角度,對(duì)每個(gè)球員進(jìn)行檢測(cè)和追蹤,重構(gòu)他們的體型和姿勢(shì),並進(jìn)行組合重建。”
該系統(tǒng)能夠準(zhǔn)確預(yù)測(cè)深度圖,並將其與彩色膠片相結(jié)合,以3D形式重構(gòu)每個(gè)球員。但是,目前足球的重構(gòu)仍在進(jìn)行中。他們寫(xiě)道:“我們?cè)诰€實(shí)現(xiàn)了首個(gè)端到端系統(tǒng)的目標(biāo),但足球的重構(gòu)還未實(shí)現(xiàn),這是未來(lái)繼續(xù)努力的方向?!?
研究人員將比賽重置于虛擬的足球場(chǎng)上,在世界上任何地點(diǎn)通過(guò)3D或AR設(shè)備便可以從多種角度觀看比賽。他們使用微軟的全息透鏡智能眼鏡進(jìn)行了測(cè)試,盡管該系統(tǒng)只適用于合成的比賽視頻,但他們?cè)赮ouTube上找了十個(gè)高辨別率的職業(yè)足球比賽視頻,對(duì)其進(jìn)行了測(cè)試,結(jié)果非常好。