[No.L001]
(圖片來源:云圖視覺)
2019年01月03日,在學(xué)習(xí)谷歌和華為并向華盛頓大學(xué)的UW Reality Lab捐贈(zèng)一筆資金后,F(xiàn)acebook的付出似乎開始迎來回報(bào)。
根據(jù)本月初公布了一份的論文《Photo Wake-Up: 3D Character Animation from a Single Photo(喚醒圖片:基于單張圖片的3D角色動(dòng)畫)》,華盛頓大學(xué)和Facebook的研究人員開發(fā)了一種僅利用單張圖片即可在AR環(huán)境中生成3D動(dòng)畫的方法。
他們的方案能夠?qū)⒖勺冃诬|體模型擬合到圖像,并估計(jì)模型的軀體映射。利用映射模型,系統(tǒng)能夠構(gòu)建3D網(wǎng)格,然后將紋理應(yīng)用于與軀體映射匹配的網(wǎng)格,同時(shí)集成骨架rig以控制圖形的運(yùn)動(dòng)。如動(dòng)圖或視頻所示,具體的效果就像是照片中的對(duì)象活了過來。研究小組表示,他們研發(fā)的系統(tǒng)適用于圖片,卡通人物,甚至是抽象繪畫。
對(duì)于 《Photo Wake-Up: 3D Character Animation from a Single Photo(喚醒圖片:基于單張圖片的3D角色動(dòng)畫)》這份論文,作者包括Facebook研究科學(xué)家、華盛頓大學(xué)Paul G. Allen計(jì)算機(jī)科學(xué)與工程學(xué)院的助理教授Ira Kemelmacher-Shlizerman;UW Reality Lab的聯(lián)合主任Brian Curless;以及華盛頓大學(xué)博士生,于2018年夏天曾在Facebook擔(dān)任研究實(shí)習(xí)生的翁仲毅。
(圖片來源:云圖視覺)
Kemelmacher-Shlizerman是在Facebook收購其初創(chuàng)公司Dreambit后加入這家公司。Curless對(duì)3D表面重建的研究則曾對(duì)微軟HoloLens和谷歌Project Tango中的環(huán)境映射算法作出過貢獻(xiàn)。
在演示視頻中我們可以看到,一名HoloLens用戶正看著畢加索畫作中的人物從畫布“逃走”,廣告中的男人向前奔跑,以及詹姆斯·保羅·麥卡特尼從披頭士唱片《Help!》的封面中冒出頭來。
正如論文在局限部分所述,實(shí)踐結(jié)果有點(diǎn)粗糙(當(dāng)然,這實(shí)際上有利于抽象畫作),但計(jì)算機(jī)視覺方法與Facebook對(duì)Spark AR平臺(tái)的全身AR蒙版,圖像識(shí)別,以及其他功能的研究相一致。
就目前而言,研究團(tuán)隊(duì)只是通過HoloLens演示了這種AR體驗(yàn),他們沒有明確表示方法的實(shí)現(xiàn)是否需要這款頭顯的深度傳感器。
盡管研究技術(shù)可能不會(huì)馬上登陸Spark AR平臺(tái)或谷歌的移動(dòng)AR項(xiàng)目,但最終,為華盛頓大學(xué)UW Reality Lab提供過資金援助的企業(yè)都會(huì)從相關(guān)的研究中獲益。
榜單收錄、高管收錄、融資收錄、活動(dòng)收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報(bào)生成中...