omniture

英特爾推動(dòng)音樂進(jìn)化 李宇春全球首支AI MV大揭秘

英特爾
2017-11-02 18:29 10286
近日,英特爾和李宇春聯(lián)合推出了李宇春全球首支基于英特爾人工智能的MV--《今天雨,可是我們在一起》。

北京2017年11月2日電 /美通社/ -- 有人說音樂是一種能觸碰到人靈魂的東西,是一種思想情感的釋放。那么,音樂MV就是更好將音樂創(chuàng)作者的感情、情緒更立體更形象地表達(dá)出來,而音樂的表達(dá)形式也在不斷地進(jìn)化。近日,英特爾和李宇春聯(lián)合推出了李宇春全球首支基于英特爾人工智能的MV--《今天雨,可是我們在一起》。這首MV采用了英特爾人工智能技術(shù),也成為了科技賦能音樂和娛樂的又一項(xiàng)創(chuàng)新范例。英特爾正在通過自己的科技,推動(dòng)著音樂和娛樂的發(fā)展進(jìn)程。

李宇春全球首支基于英特爾人工智能MV 綻放情緒
李宇春全球首支基于英特爾人工智能MV 綻放情緒

《今天雨,可是我們在一起》是李宇春對粉絲的情感表達(dá),記錄了李宇春演唱會上粉絲冒著雨和她一起唱歌時(shí),心中的感動(dòng)與感激。為了將李宇春歌曲的寓意創(chuàng)新表達(dá),導(dǎo)演選用了不同的情緒場景去展現(xiàn)李宇春的內(nèi)心世界。使得李宇春心中想表達(dá)的很多情緒與畫面,都可以通過英特爾3D人臉面部表情捕捉技術(shù)完美的貼合在李宇春的面部。這些圖案特效不僅僅是藝術(shù)家的設(shè)計(jì),更是李宇春內(nèi)心的表達(dá)。如果說音樂通過旋律和歌詞表達(dá)內(nèi)心,那這支MV則是通過音樂與英特爾人工智能技術(shù)的結(jié)合,將音樂人內(nèi)心的情感直接呈現(xiàn)。借助英特爾3D人臉面部表情捕捉技術(shù),音樂的表達(dá)方式再一次突破了想象的疆界。

英特爾3D人臉面部表情捕捉技術(shù)與渲染特效的結(jié)合
英特爾3D人臉面部表情捕捉技術(shù)與渲染特效的結(jié)合

在這首MV的制作過程,通過英特爾3D人臉面部表情捕捉技術(shù)實(shí)現(xiàn)了視頻中李宇春人臉的自動(dòng)檢測與識別,精準(zhǔn)定位人臉的78個(gè)關(guān)鍵點(diǎn),快速重建3D人臉,并實(shí)時(shí)跟蹤面部表情變化,實(shí)現(xiàn)了輕松將預(yù)先設(shè)計(jì)好的特效素材附著在3D人臉上,重新渲染到MV視頻中,從而達(dá)到令人驚訝的臉部特效。與以往不同的是,英特爾3D人臉面部表情捕捉技術(shù)不需要在人的面部做標(biāo)記點(diǎn),也不需要復(fù)雜的傳感器,而是用到了人工智能重要的機(jī)器學(xué)習(xí)和深度學(xué)習(xí)來實(shí)現(xiàn)精準(zhǔn)的實(shí)時(shí)面部表情捕捉和3D人臉重建。

英特爾人工智能,讓情緒綻放
英特爾人工智能,讓情緒綻放

英特爾的技術(shù)工程師從數(shù)十萬的人臉圖片數(shù)據(jù)中,訓(xùn)練出的人臉識別模型,用于對視頻圖像進(jìn)行智能分析:自動(dòng)捕捉人臉區(qū)域,定位人臉關(guān)鍵特征點(diǎn)(如眼睛、鼻尖嘴唇、眉毛、臉頰輪廓點(diǎn)等),生成人臉部件的邊緣輪廓線(嘴唇線眼睛線、眉毛線、面頰輪廓等);再從數(shù)百個(gè)三維人臉掃描數(shù)據(jù)中訓(xùn)練出一個(gè)參數(shù)化的三維人臉形變模型,用于模擬任何人的相貌臉型以及表情變化;最后通過數(shù)萬張人臉照片,學(xué)習(xí)從2D圖像到3D人臉的映射關(guān)系,確保從2D照片到3D人臉的精準(zhǔn)轉(zhuǎn)換,從而達(dá)到實(shí)時(shí)3D人臉建模的效果。

此外,通過英特爾3D人臉面部表情捕捉技術(shù)實(shí)時(shí)重建的3D人臉模型,任何3D特效公司都可以對其制作特效,任何新穎的、逼真的效果都可以完美的貼合在人臉上。相比傳統(tǒng)形式,更節(jié)省時(shí)間和成本。

  • 識別原理:基于大數(shù)據(jù),通過數(shù)十萬張人臉的數(shù)據(jù)庫,實(shí)現(xiàn)了一個(gè)低精度的視頻、攝像頭捕捉到的照片或視頻都能夠精準(zhǔn)的識別人臉。隨著人臉數(shù)據(jù)庫,精度會上升。
  • 硬件要求:此次的合作基于PC,但未來可以延伸至手機(jī)等移動(dòng)端設(shè)備,對于硬件和存儲要求并不高。
  • 技術(shù)優(yōu)勢:電影特效需要臉上加標(biāo)記,再使用高清攝像頭捕捉人臉畫面,加上后期的美工和專業(yè)人士的配合。這些操作僅需要少量的人力和成本;對于硬件和存儲要求也并不高,屬于消費(fèi)級的技術(shù),可以廣泛的被推廣。

未來,英特爾甚至可以將該技術(shù)應(yīng)用在全身3D建模上,從而實(shí)現(xiàn)實(shí)時(shí)虛擬換衣等功能。

音樂豐富著人類的生活,讓藝術(shù)家的情感、情緒、思想通過美妙的方式傳達(dá)給他人。英特爾也正在通過科技,幫助著藝術(shù)家更好地表達(dá)自我。英特爾創(chuàng)造震撼體驗(yàn)的同時(shí),也在潛移默化地深入人們每天的生活,推動(dòng)著娛樂和音樂的進(jìn)化。

消息來源:英特爾
China-PRNewsire-300-300.png
全球TMT
微信公眾號“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動(dòng)態(tài)、財(cái)報(bào)信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection