“大家好，我是李宇春，我的最新單曲《今天雨，可是我們?cè)谝黄稹稭V正式發(fā)布了。在這支MV中，我心中想表達(dá)的很多情緒與畫面，都將通過英特爾3D人臉面部表情捕捉技術(shù)實(shí)時(shí)出現(xiàn)在我的臉上�！�
李宇春接受ifanr采訪視頻
近日，歌手李宇春推出了她的第一部人工智能版MV——《今天雨，可是我們?cè)谝黄稹罚揗V用到了英特爾中國(guó)研究院最新的3D人臉面部表情捕捉技術(shù)，將音樂與科技完美結(jié)合，也使音樂人的內(nèi)心情緒更豐富呈現(xiàn)。
據(jù)說(shuō)，這首MV制作歷時(shí)6個(gè)月才完成，具體來(lái)說(shuō)，制作共分4個(gè)步驟完成：
導(dǎo)演首先進(jìn)行 MV 原始素材得拍攝；然后使用英特爾最新的3D 面部表情捕捉技術(shù)對(duì)素材中李宇春的面部進(jìn)行跟蹤捕捉，建立 3D 模型；其次特效公司根據(jù) MV 需求制作面部特效圖案； 最后，特效公司在離線狀態(tài)下將圖案實(shí)時(shí)且無(wú)縫繪制于其臉部。
完整MV
英特爾3D人臉面部表情捕捉技術(shù)用到了人工智能最重要的分支：機(jī)器學(xué)習(xí)和深度學(xué)習(xí)。英特爾的技術(shù)工程師從數(shù)十萬(wàn)的人臉圖片數(shù)據(jù)中，訓(xùn)練出的人臉識(shí)別模型，用于對(duì)視頻圖像進(jìn)行智能分析：自動(dòng)捕捉人臉區(qū)域，定位人臉關(guān)鍵特征點(diǎn)（如眼睛，鼻尖，臉頰輪廓點(diǎn)等），生成人臉部件的邊緣輪廓線；
再?gòu)臄?shù)百個(gè)三維人臉掃描數(shù)據(jù)中訓(xùn)練出一個(gè)參數(shù)化的三維人臉形變模型，用于模擬任何人的相貌臉型以及表情變化；最后通過數(shù)萬(wàn)張人臉照片，學(xué)習(xí)從2D圖像到3D人臉的映射關(guān)系，確保從2D照片到3D人臉的精準(zhǔn)轉(zhuǎn)換，從而達(dá)到實(shí)時(shí)3D人臉建模的效果。未來(lái)，英特爾甚至可以將該技術(shù)應(yīng)用在全身3D建模上，從而實(shí)現(xiàn)實(shí)時(shí)虛擬換衣等功能。
英特爾為了能讓普通觀眾可以近距離的接觸人工智能技術(shù)，還特意在成都搭建了一處線下體驗(yàn)區(qū)。
成都體驗(yàn)區(qū)
觀眾可以直接站在攝像頭前面體驗(yàn)人工智能技術(shù)
觀眾現(xiàn)場(chǎng)體驗(yàn)
采集觀眾面部的攝影頭
情緒房間體驗(yàn)區(qū)
情緒房間體驗(yàn)區(qū)
情緒房間體驗(yàn)區(qū)
英特爾通過攝像頭來(lái)定位 78 個(gè)關(guān)鍵點(diǎn)，實(shí)時(shí)跟蹤頭部運(yùn)動(dòng)和面部表情變化，對(duì)圖像進(jìn)行智能分析和特征提取，再通過運(yùn)算將不同的特效疊加上去，得到我們最終看到的效果。
英特爾的大屏幕上顯示著各種技術(shù)效果的術(shù)語(yǔ)
衍生品
幕后視頻
