2021年5月27日~30日,第28屆中國國際廣播電視信息網(wǎng)絡(luò)展覽會(CCBN2021)于北京召開。同期還舉行了包括主題報告會、智慧廣電+、智能視聽、融媒體、有線、TVOS在內(nèi)的31場高峰論壇。
5月29日下午,華為中國區(qū)大視頻業(yè)務(wù)部解決方案總監(jiān)魯如欣出席了“超高清電視論壇”,并做了題為《科技賦能、產(chǎn)業(yè)協(xié)同,啟高新視頻發(fā)展新局》的主題演講。以下為演講內(nèi)容:
華為中國區(qū)大視頻業(yè)務(wù)部解決方案總監(jiān)—魯如欣
“三維升級”引領(lǐng)高新視頻發(fā)展方向
高新視頻所定義的各類新場景代表了用戶對更高品質(zhì)的視頻體驗(yàn)的追求與期待,也代表著用戶最原始的需求。
從發(fā)展趨勢看,高新視頻自身正在面臨著視頻畫質(zhì)、創(chuàng)作方式、交互模式三個維度的升級,這三個維度重新定義了視頻內(nèi)容表現(xiàn)。
畫質(zhì)升級沿著視頻既有的演進(jìn)路徑從分辨率、色域、色深等層面延展,滿足人眼對視覺感受的持續(xù)追求,在產(chǎn)業(yè)計(jì)劃中制定了“4K先行、兼顧8K”的總體技術(shù)路線。
內(nèi)容創(chuàng)作方式的升級,體現(xiàn)了用戶和“視頻內(nèi)容”之間關(guān)系的變化,分支劇情就是其中的典型代表,本質(zhì)上是“用戶定義的”劇情走向。
交互模式升級是得益于網(wǎng)絡(luò)通道的拓寬及算力的增強(qiáng),使得更多的視頻數(shù)據(jù)可以實(shí)時傳輸?shù)皆贫、分發(fā)到用戶終端,使視頻由“平面”延展到了“空間”,提升了用戶觀看視頻的互動性,也為用來帶來更接近真實(shí)世界的展示效果,近來比較熱門的自由視角、VR、AR、MR、多視角等都屬于這一范疇,用戶可以獲得更沉浸、自由的觀看體驗(yàn)。
MediaCube賦能高新視頻高效生產(chǎn)
華為一直立足于成為視頻行業(yè)的技術(shù)使能者,希望助力新業(yè)態(tài)的持續(xù)發(fā)展;诙嗄暝谟布A(chǔ)設(shè)施、視頻領(lǐng)域?qū)I(yè)技術(shù)積累,華為正式推出了MediaCube高新視頻生產(chǎn)解決方案,以提升高新視頻生產(chǎn)效率。
MediaCube定位為高新視頻內(nèi)容生產(chǎn)新型基礎(chǔ)設(shè)施,有四大核心價值:
■ 一是小身材大容量,滿足高新視頻大數(shù)據(jù)量的處理需求:計(jì)算、存儲、網(wǎng)絡(luò)、電源等資源ALLIN ONE,具備高吞吐能力及超強(qiáng)算力,可同時處理上百路4K視頻。
■ 二是將所有業(yè)務(wù)場景ALL IN ONE,一臺設(shè)備支持自由視角、多視角、8K VR等多類高新視頻場景內(nèi)容生產(chǎn),將各類垂直場景的生產(chǎn)集中整合,且可以即開即用,降低高新視頻生產(chǎn)的門檻。
■ 三是MediaCube作為高新視頻內(nèi)容生產(chǎn)的新型基礎(chǔ)設(shè)施,具備多平臺對接能力,即支持對接各種制播平臺輸出可用于電視端PGM信號生產(chǎn)的素材,又支持面向新媒體/互聯(lián)網(wǎng)端輸出直接面向用戶互動分發(fā)的高新視頻內(nèi)容。
■ 最后也是最重要的一點(diǎn)就是平臺的持續(xù)演進(jìn)能力,后續(xù)MediaCube會持續(xù)加載高新視頻各類新場景、新技術(shù),實(shí)現(xiàn)新場景技術(shù)演進(jìn)與新業(yè)態(tài)實(shí)踐雙向促進(jìn)的正向循環(huán)。
下面來分別介紹下華為在各場景下的相關(guān)能力進(jìn)展:
自由視角是當(dāng)前熱度最高的場景之一,通過360度的環(huán)繞式觀看方式,帶給用戶耳目一新的體驗(yàn)。同時,自由視角能讓我們期待的不僅僅是環(huán)繞式的展現(xiàn)形式,還有對內(nèi)容本身更加豐富、更加立體、更加細(xì)膩的呈現(xiàn)。MediaCube通過對上百臺4K視頻流的高通量處理能力,做到360度全視角部署,且視角切換畫面無跳變的體驗(yàn);通過對標(biāo)定算法的升級支持非規(guī)則的部署的“立體式”自由視角;通過對同源視頻的多軸心的處理算法可以讓每個用戶圍繞感興趣的點(diǎn)旋轉(zhuǎn)觀看,實(shí)現(xiàn)更高的觀看自由度;通過虛擬視角空間插幀技術(shù)把用100臺攝像機(jī)拍攝的畫面轉(zhuǎn)換為300路甚至更多攝像機(jī)拍攝的效果,實(shí)現(xiàn)更平滑流暢的“旋轉(zhuǎn)播放”,對關(guān)鍵畫面的表達(dá)更充分,這種技術(shù)也可以在一定程度上用于降低前端攝相機(jī)的數(shù)量,進(jìn)而降低拍攝成本;
多視角場景是由用戶自主定義觀看視角,通常節(jié)目前端都是采用多個機(jī)位拍攝,最后統(tǒng)一制作為一路PGM信號,多視角的觀看形態(tài)相當(dāng)于對內(nèi)容價值進(jìn)行了二次挖掘,這種體驗(yàn)可廣泛的應(yīng)用于體育、文娛、重大活動等場景。華為的解決方案兼容手機(jī)、機(jī)頂盒等多類型終端,用戶觀看的每一路視頻都可達(dá)到1080P畫質(zhì),且通過幀同步技術(shù)實(shí)現(xiàn)不同畫面間時間差不超過40ms,進(jìn)而保證在不同畫面切換時音視頻的無縫銜接。
VR應(yīng)該是目前技術(shù)成熟度最高、應(yīng)用最廣泛的高新視頻場景,8K是入門級體驗(yàn),但目前市面上終端解碼能力大多停留在4K,MediaCube可通過FOV技術(shù)實(shí)現(xiàn)對8KVR的轉(zhuǎn)碼處理,使用戶在4K終端上也可以獲取8K的體驗(yàn),同時空間音效技術(shù)可以最大限度的還原現(xiàn)場音,根據(jù)用戶所在的方位輸出聲音,當(dāng)用戶方位變化時,所聽到的聲音也是變化的,這種聲音的輸出配合高清晰度的畫面,可以讓用戶獲得更加沉浸的體驗(yàn)。雙5G網(wǎng)絡(luò)的高密部署,為打通優(yōu)質(zhì)視頻內(nèi)容與廣大的線上用戶的連接提供了信息傳送的高速通道;以MediaCube為代表的高新視頻近源生產(chǎn)系統(tǒng)協(xié)同遠(yuǎn)端視頻3.0+平臺及視頻云服務(wù)相關(guān)能力,產(chǎn)生出自由視角、8K VR、多視角等創(chuàng)新交互體驗(yàn)場景,為優(yōu)質(zhì)視頻內(nèi)容的創(chuàng)作及展現(xiàn)提供了更廣闊的空間;云管邊的協(xié)同,使得現(xiàn)場的觀眾能夠感受到VIP最佳視角的觀看體驗(yàn),也讓線上的觀眾能夠獲得更實(shí)時、更真實(shí)、更沉浸的的臨場感。
產(chǎn)業(yè)協(xié)同促高新視頻繁榮發(fā)展
高新視頻的發(fā)展,將為云演藝、智慧觀賽等新業(yè)態(tài)的規(guī)模涌現(xiàn)及繁榮發(fā)展奠定堅(jiān)實(shí)的基礎(chǔ)。為了促進(jìn)業(yè)務(wù)盡快普及,并進(jìn)一步走向繁榮,華為也一直在聯(lián)合產(chǎn)業(yè)各方,做出自己的貢獻(xiàn)。
今年5月22日,中國歌劇舞劇院與華為在北京正式簽署戰(zhàn)略合作協(xié)同,同時召開了《舞上春》線上演播發(fā)布會。中國歌劇舞劇院開創(chuàng)性的將業(yè)務(wù)考核展示與劇目演出融合呈現(xiàn),通過自由視角、多視角、8K VR等技術(shù)加持下,對舞者扎實(shí)的基本功、豐富的肢體語言等舞臺上的種種細(xì)節(jié)進(jìn)行還原,同時打破時空局限,向廣大觀眾完美呈現(xiàn)了一場代表中國舞頂級水平的視覺盛宴,讓更多用戶更加深刻的感受到舞蹈之美。目前該內(nèi)容已在華為視頻、天翼超高清、沃視頻、咪咕愛看等手機(jī)客戶端,以及運(yùn)營商IPTV大屏、VR屏等多渠道線上首發(fā),歡迎大家在線觀看體驗(yàn)技術(shù)與藝術(shù)的融合之美。
在體育領(lǐng)域,華為也在積極推進(jìn)在賽事中開展智慧觀賽實(shí)踐,從2019年至今,我們聯(lián)合產(chǎn)業(yè)合作伙伴在乒乓球、拳擊、籃球等體育賽事中進(jìn)行了實(shí)踐。依托于Huawei MediaCube、視頻3.0+平臺及超高清內(nèi)容分發(fā)網(wǎng)絡(luò),打通了高新視頻生產(chǎn)到分發(fā)的各關(guān)鍵環(huán)節(jié),實(shí)現(xiàn)了自由視角、多視角、VR等業(yè)務(wù)場景的商用分發(fā)。
2019年11月,聯(lián)合中國聯(lián)通在男乒世界杯開展智慧觀賽試點(diǎn),完成了自由視角、多視角、VR全場景的首次商用分發(fā)。
2020年5月,與鄒軒體育、中國電信合作,在“激戰(zhàn)到底”拳擊賽中,面向天翼超高清手機(jī)端用戶,提供了全程自由視角直播的觀賽體驗(yàn)。
2021年,在陜西十四運(yùn)籃球測試賽中,完成了三大業(yè)務(wù)在TV屏、手機(jī)屏、VR屏三屏的端到端解決方案打通。
除此之外,在19年的CBA季前賽、20年的拳力聯(lián)盟、足球賽、重慶花滑世界杯等大型賽事均重點(diǎn)參與了高新視頻內(nèi)容的制作與輸出。
高新視頻智慧觀賽為用戶帶來了更多賽事中容易被忽略但又異常精彩的細(xì)節(jié),讓用戶體會到前所未有的臨場體驗(yàn);為場館方/轉(zhuǎn)播方/協(xié)會帶來新的商業(yè)增長機(jī)會;
近期,我們聯(lián)合總局5G高新視頻體育融合創(chuàng)新實(shí)驗(yàn)室,面向冬奧中的熱門項(xiàng)目冰球、花滑等,開展了關(guān)鍵動作分析、賽事復(fù)盤、戰(zhàn)略戰(zhàn)術(shù)分析等智慧訓(xùn)練三大場景的探索。
通過將運(yùn)動過程剪輯成自由視角、精彩瞬間等360度短視頻,讓選手及教練員獲得全方位的觀看視角,并可以通過自主控制,逐角度細(xì)致觀看,用于關(guān)鍵動作的比對及差距分析。
通過任務(wù)跟蹤+AI焦點(diǎn)處理技術(shù),提取團(tuán)體賽中若干關(guān)鍵隊(duì)員在任意時刻、同一時刻的臨場表現(xiàn),多維度還原比賽現(xiàn)場,完成完整的賽事復(fù)盤。
通過骨骼跟蹤技術(shù)獲取運(yùn)動員的實(shí)時空間位姿信息,進(jìn)一步測算決定比分的關(guān)鍵運(yùn)動數(shù)據(jù)如運(yùn)動員的進(jìn)攻速度、加速度等;通過Team Panel查看團(tuán)隊(duì)配合情況;通過運(yùn)動軌跡提取查看某位運(yùn)動員的臨場表現(xiàn)。
未來,華為希望通過推進(jìn)MediaCube及雙G網(wǎng)絡(luò)在場館、影視基地、藝術(shù)舞臺等各內(nèi)容生產(chǎn)基地作為新型基礎(chǔ)設(shè)施進(jìn)行常態(tài)化部署,實(shí)現(xiàn)高新視頻內(nèi)容的常態(tài)化供給;通過高新視頻內(nèi)容面向存量IPTV、手機(jī)視頻用戶分發(fā),實(shí)現(xiàn)對億級存量用戶價值的深度挖掘;通過生產(chǎn)與消費(fèi)互相促進(jìn)實(shí)現(xiàn)新業(yè)態(tài)的商業(yè)正循環(huán)。
同時,也希望能夠與業(yè)界眾多伙伴繼續(xù)緊密合作,共同推進(jìn)超高清視頻產(chǎn)業(yè)的繁榮發(fā)展。