物聯(lián)網(wǎng)

英特爾3DAT技術(shù)用科技美學(xué)詮釋奧運(yùn)精神

ainet.cn   2022年02月07日

  2022年2月4日,北京又一次成為了全世界的焦點(diǎn),北京2022年冬奧開幕式奉獻(xiàn)了“你沒有理由錯過的一場表演”??倢?dǎo)演張藝謀先前表示:“本次開幕式的理念是用科技讓開幕式‘人少而不空,空靈而浪漫’。節(jié)目設(shè)計將展現(xiàn)自然之美、人文之美和運(yùn)動之美,向全世界傳遞戰(zhàn)勝疫情的信心?!?/FONT>

  為了踐行“節(jié)儉辦奧運(yùn)”理念,北京2022年冬奧會開幕式既要做到演員規(guī)模小,演出時間短,也要展現(xiàn)參與更廣、更加精彩的效果。這些要求在鳥巢這樣大型的場地上,如何讓屏幕影像、視覺特效和設(shè)備裝置最后呈現(xiàn)出一場完美、高品質(zhì)的表演,成為一個巨大的挑戰(zhàn)。這就需要提供一種高科技與高水平藝術(shù)完美結(jié)合的解決方案,讓這場開幕式真正成為一次科技力、藝術(shù)感、體育精神、人類價值之間開創(chuàng)性的完美融合。

冬奧開幕式里的“藝術(shù)”

  空靈、浪漫的藝術(shù)風(fēng)格貫穿開幕式始終,但其中有兩個瞬間尤為動人。

  幾組滑冰運(yùn)動員靈動地游走在覆蓋著冰雪的“湖面”上,他們櫛風(fēng)沐雪勇敢地前行,漫天流動的風(fēng)雪,在運(yùn)動員的腳下實(shí)時消散,鐫刻著“更快,更高,更強(qiáng),更團(tuán)結(jié)”中英文奧運(yùn)口號的湖面氤氳浮現(xiàn)。奧運(yùn)精神感染著在場所有的觀眾。

  伴隨著美妙的和聲,五百多個孩子手持著發(fā)光的和平鴿出現(xiàn)在國家體育場的中央,他們每人腳踏一簇晶瑩的雪花,在舞臺上自由自在地歡笑嬉戲,就像五百多名小天使把和平和微笑帶給現(xiàn)場和電視機(jī)前的每一個觀眾。童趣與溫馨同在,壯觀與可愛并存。這個節(jié)目是歷屆奧運(yùn)會開幕式上的規(guī)定動作,在本屆冬奧會上和平鴿環(huán)節(jié)安排在奧運(yùn)火炬點(diǎn)火儀式前,給所有人都留下了深刻的記憶。

  國家體育場鋪設(shè)的LED大屏系統(tǒng)與演員之間的實(shí)時“互動”成為了本次冬奧開幕式一大亮點(diǎn)??倢?dǎo)演張藝謀此前曾透露,本次冬奧會開幕式運(yùn)用了大現(xiàn)場實(shí)時捕捉的一種互動技術(shù)。

  “你可能在某些場地上,會看到雪花跟演員的流動,完全是互動的,人到哪里,雪花到哪里,或者雪花就會分開,給人讓出來。這樣的互動,不是你精準(zhǔn)排練或者視頻和人的精準(zhǔn)合成可以做到的,像這樣的一種東西都需要新的科技?!薄本?022年冬奧會和冬殘奧會開閉幕式總導(dǎo)演張藝謀

冬奧開幕式里的“科技”

  風(fēng)雪特效跟運(yùn)動員的配合天衣無縫,運(yùn)動員所到之處“風(fēng)雪消融”;雪花與孩子如影隨形,陪著孩子們在舞臺上自由地移動……人與藝術(shù)效果的默契配合成為了演出成功的關(guān)鍵。

  而這種“默契配合”并非精準(zhǔn)排練的結(jié)果,它來自于一個更高效、更科技的手段——英特爾? 3DAT三維運(yùn)動員追蹤技術(shù),它帶來了可以讓地面的屏幕瞬間對演員位移做出實(shí)時反饋并呈現(xiàn)藝術(shù)效果的技術(shù)方案。英特爾聯(lián)合北京電影學(xué)院專業(yè)團(tuán)隊基于英特爾的3DAT技術(shù)針對冬奧開幕式場景定制開發(fā)的 “基于AI的大型演出實(shí)時特效系統(tǒng)” 是實(shí)現(xiàn)整個節(jié)目創(chuàng)意的關(guān)鍵技術(shù)。

  英特爾? 3DAT三維運(yùn)動員追蹤技術(shù)是一套復(fù)雜的系統(tǒng),它由攝像機(jī)信息采集、數(shù)據(jù)分析、藝術(shù)效果渲染三大子系統(tǒng)構(gòu)成,其核心算法是基于計算機(jī)視覺、AI的實(shí)時人體檢測和位置追蹤技術(shù)。正是因?yàn)檫@套系統(tǒng)運(yùn)行在第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器上,其強(qiáng)大的算力加上先進(jìn)的AI和計算機(jī)視覺算法,讓國家體育場地面上鋪設(shè)的這塊巨大的LED屏幕有了 “可交互” 的可能。

  然而演員與系統(tǒng)的“互動”并非那樣簡單,有兩個核心的問題需要解決:

  ● 第一,要精準(zhǔn)地識別出舞臺上的演員并定位他們的位置。國家體育場巨大的舞臺需要攝像機(jī)及核心算法的覆蓋,夜晚的環(huán)境、周圍各式各樣的布景燈光、演員服裝的顏色、演員的動作姿態(tài)尤其是幾百人自由移動狀態(tài)下人影的重疊等等,這些都對3DAT人工智能核心算法提出了極高的要求。

  ● 其次,演員與系統(tǒng)的互動必須是“實(shí)時”的,要能夠呈現(xiàn)出“默契配合”的藝術(shù)效果。如果藝術(shù)效果的呈現(xiàn)稍有延遲,觀眾就會看到拖影、卡頓,認(rèn)為系統(tǒng)不夠“靈敏”,讓藝術(shù)呈現(xiàn)大打折扣。這就需要技術(shù)團(tuán)隊不斷地壓縮整個系統(tǒng)里各個環(huán)節(jié)的響應(yīng)和反饋時間,壓縮到極致。

  現(xiàn)在,讓我們通過《雪花》節(jié)目的演繹,來看看英特爾是如何解決這兩個難題的。

  在《雪花》節(jié)目中,總共有五百多個孩子在場地上表演,我們的任務(wù)是盡可能準(zhǔn)確識別每個孩子并精確計算他們在場上的真實(shí)位置。從技術(shù)角度我們面臨很多挑戰(zhàn),孩子們在一個很大的場地表演,他們的運(yùn)動范圍覆蓋全場,孩子們隨意走動,并完成多次復(fù)雜的動作變化,現(xiàn)場環(huán)境幾乎沒有舞臺燈光。為此,我們在距離場地最遠(yuǎn)的6層看臺處放置4臺專業(yè)攝像設(shè)備,用于捕捉覆蓋全場的視頻信息。針對節(jié)目表演特點(diǎn)及攝像機(jī)視頻數(shù)據(jù)特性,憑借豐厚的AI技術(shù)儲備,我們精心設(shè)計開發(fā)了多個深度神經(jīng)網(wǎng)絡(luò)模型,能夠高效檢測識別這么多的演員并實(shí)時輸出他們的運(yùn)動軌跡數(shù)據(jù)。

  在實(shí)時性上,英特爾依靠的是來自邊緣計算系統(tǒng)的強(qiáng)大算力。攝像機(jī)將采集到的數(shù)據(jù)信號通過光纖傳輸?shù)接⑻貭栐趪殷w育場內(nèi)搭載的第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器的邊緣計算系統(tǒng)。第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器,支持8通道DDR4,64條PCI EXPRESS 4.0通道,全面增強(qiáng)I/O吞吐量,為實(shí)時、大量、精準(zhǔn)度要求高的圖形、影像處理和3D建模、數(shù)據(jù)分析,提供堅實(shí)基礎(chǔ)。在測試中,我們發(fā)現(xiàn)搭載第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器的系統(tǒng)性能穩(wěn)定,可保證系統(tǒng)長時間連續(xù)運(yùn)行。同時在傳輸效率上,基于英特爾? OpenVINO? 視覺工具套件進(jìn)行開發(fā),進(jìn)而實(shí)現(xiàn)精準(zhǔn)、流暢、實(shí)時的視頻數(shù)據(jù)讀取、預(yù)處理。從圖像采集識別、檢測和處理,只需要幾十毫秒的時間,真正做到了實(shí)時傳輸。

  最終,由北京電影學(xué)院的藝術(shù)效果團(tuán)隊基于每個孩子的位置在地面實(shí)時渲染出藝術(shù)特效,同時迅速反饋給LED控制器,有了這種巧妙的配合,觀眾就可以看到孩子們腳下的屏幕與他們默契交互的驚艷效果了。

  總之,3DAT所擁有的強(qiáng)大算力以及先進(jìn)的AI算法讓實(shí)現(xiàn)大范圍、多人數(shù)、高精準(zhǔn)、低延時實(shí)時數(shù)據(jù)采集、分析成為了可能。至此,英特爾以領(lǐng)先技術(shù)為開幕式藝術(shù)效果驅(qū)動,讓國家體育場成為了演藝人員靈敏且絢麗的表演道具,打開了節(jié)目創(chuàng)作的全新思路。最終給大家呈現(xiàn)了一場美輪美奐的視覺盛宴。

  英特爾和北京電影學(xué)院的聯(lián)合項目組從2021年6月份開始進(jìn)行項目預(yù)研,在7月中旬第一次給張藝謀導(dǎo)演及北京冬奧組委開閉幕式工作部常宇部長展示了英特爾3DAT實(shí)時互動的技術(shù)解決方案,10月份開始進(jìn)入國家體育場部署演練,大家奮戰(zhàn)100多天,最終給全球觀眾呈現(xiàn)了這場無與倫比的表演。

  英特爾在國家體育場部署了包含5臺搭載第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器的邊緣計算系統(tǒng)、大容量光纖、攝像錄制系統(tǒng)、渲染系統(tǒng),配備了多達(dá)40余人的工程師團(tuán)隊全程保駕護(hù)航。大家犧牲了元旦和春節(jié)假期以及絕大多數(shù)周末時間,經(jīng)常在鳥巢演練和彩排到深夜……現(xiàn)在看來,一切的付出都是值得的,成功助力北京冬奧開幕式成為了現(xiàn)代科技美學(xué)演繹的典范。

  3DAT技術(shù)也將被廣泛應(yīng)用于很多領(lǐng)域,特別是在賽場之外為運(yùn)動員訓(xùn)練提供專業(yè)洞察的領(lǐng)域。3DAT技術(shù)通過人工智能和計算機(jī)視覺算法,對采集到的視頻數(shù)據(jù)進(jìn)行智能分析和處理,能夠高質(zhì)量重建人體骨骼關(guān)節(jié)在真實(shí)空間的三維運(yùn)動信息,基于此信息可以進(jìn)行生物力學(xué)特性及運(yùn)動表現(xiàn)分析,幫助教練員制定科學(xué)正確的訓(xùn)練方法,為運(yùn)動員的日常訓(xùn)練提供切實(shí)有用的技術(shù)支持。3DAT技術(shù)在未來將落地至健康、理療、動畫、游戲等更多場景,革新人們生活的方方面面,創(chuàng)造無限精彩。

  英特爾一直都在踐行宏旨:創(chuàng)造改變世界的科技,造福地球上每一個人。英特爾領(lǐng)先科技的加持,讓打造一場“簡約、安全、精彩” 的冬奧開幕式成為了可能。而在本屆冬奧會上,英特爾的創(chuàng)新技術(shù)如AI數(shù)據(jù)分析、360° VR技術(shù)平臺、VSS數(shù)字孿生場館模擬仿真系統(tǒng)等都將得到展現(xiàn)。冬奧只是“科技創(chuàng)造美好” 的縮影,在未來,英特爾將用更多的科技力量,讓全世界更多領(lǐng)域都能感知到觸手可及的美好。

(轉(zhuǎn)載)

標(biāo)簽:英特爾 3DAT技術(shù) 我要反饋 
泰科電子ECK、ECP系列高壓直流接觸器白皮書下載
優(yōu)傲機(jī)器人下載中心
億萬克
專題報道
2025世界人工智能大會
2025世界人工智能大會

2025世界人工智能大會暨人工智能全球治理高級別會議(簡稱“WAIC 2025”)將于7月在上海世博中心和世博展覽館舉行... [更多]

加入全球AI浪潮第一現(xiàn)場
加入全球AI浪潮第一現(xiàn)場

2025世界人工智能大會暨人工智能全球治理高級別會議將于7月26日至28日在上海世博中心和世博展覽館舉辦,本屆大會主題為... [更多]

聚力同行 · 新智“碳”索
聚力同行 · 新智“碳”索

“新華社-智能·零碳”項目策劃以“聚力同行·新智‘碳’索”為主題的新能源專題,主要圍繞光伏、儲能、鋰電、氫能、風(fēng)能五大新... [更多]