“這簡(jiǎn)直太好玩了，我還沒(méi)有玩夠！”運(yùn)動(dòng)員在冬奧會(huì)場(chǎng)館內(nèi)沉迷玩VR游戲的視頻近日在多個(gè)社交媒體上廣泛傳播。

冬奧場(chǎng)館內(nèi)的VR游戲?qū)崨r

隨著全民對(duì)冬奧賽事的關(guān)注度提高，越來(lái)越多的人感受到冰雪運(yùn)動(dòng)的魅力。一些精彩瞬間的背后，VR直播、360度自由觀賽、虛擬數(shù)字人……不少“元宇宙”要素活躍在北京冬奧會(huì)的各個(gè)角落。

自從2016年里約奧運(yùn)會(huì)首次使用VR技術(shù)以后，奧運(yùn)會(huì)不但記錄著運(yùn)動(dòng)員的成長(zhǎng)，也見(jiàn)證著VR技術(shù)發(fā)展。比如說(shuō)，2018年韓國(guó)平昌奧運(yùn)會(huì)期間，英特爾通過(guò)True VR技術(shù)對(duì)部分賽事拍攝，提供360度全景視頻觀看，同時(shí)還提供VR直播和VR點(diǎn)播兩種類型的賽事觀看服務(wù)。今年北京冬奧會(huì)，VR技術(shù)的應(yīng)用更是在娛樂(lè)、訓(xùn)練、觀賽等多個(gè)領(lǐng)域都給人們帶來(lái)了更多的驚喜。

通過(guò)360度全景視頻觀看比賽

冬奧會(huì)賽事進(jìn)程已接近尾聲，VR技術(shù)究竟用在了哪些地方？國(guó)內(nèi)VR廠商們又是如何在冬奧會(huì)中贏得世界關(guān)注？經(jīng)過(guò)一番調(diào)查并親自VR觀賽后，我們發(fā)現(xiàn)這次冬奧會(huì)，VR廠商們都在集體“秀大招”。

一、親測(cè)3種VR看冬奧，大屏觀賽如臨現(xiàn)場(chǎng)

“VR直播年年有，但是每次直播效果都不好?！?/strong>過(guò)去的VR直播受限于場(chǎng)地、設(shè)備等原因，轉(zhuǎn)播的畫(huà)面總會(huì)出現(xiàn)模糊不清、觀看角度不好和時(shí)效性差等問(wèn)題，因此，部分觀眾一直不看好大型賽事的VR直播，對(duì)于臨場(chǎng)感和沉浸感更是不奢求。

為了解決這些難題，國(guó)內(nèi)早在2019年就專門(mén)組建了“冰雪項(xiàng)目交互式多維度觀賽體驗(yàn)技術(shù)與系統(tǒng)”項(xiàng)目團(tuán)隊(duì)，由北京大學(xué)牽頭，國(guó)家實(shí)驗(yàn)室、企業(yè)和其他高校參與合作研發(fā)，北京大學(xué)教授陳寶權(quán)為項(xiàng)目負(fù)責(zé)人。

北京大學(xué)教授陳寶權(quán)

研究人員會(huì)根據(jù)場(chǎng)館情況布置多臺(tái)攝像機(jī)，記錄比賽現(xiàn)場(chǎng)的精彩畫(huà)面。他們?cè)谑锥紙?chǎng)館部署的40臺(tái)4K陣列攝像機(jī)和3臺(tái)可實(shí)現(xiàn)8K VR直播的相機(jī)。

賽場(chǎng)的攝像機(jī)陣列

部分細(xì)心的網(wǎng)友扒出攝像機(jī)陣列的相關(guān)細(xì)節(jié)，認(rèn)為其廠商可能是國(guó)內(nèi)攝像機(jī)品牌Z-CAM，而8K VR直播的相機(jī)可能為Insta 360影石專業(yè)級(jí)相機(jī)Titan。

賽場(chǎng)旁的Titan相機(jī)

1、VR冬奧怎么看？親測(cè)三種VR觀賽方式

經(jīng)過(guò)調(diào)查，我們發(fā)現(xiàn)目前共有三種方式可以感受VR冬奧的魅力：VR設(shè)備、手機(jī)上的央視頻APP、以及H5頁(yè)面。

除了使用國(guó)內(nèi)自研的VR攝像設(shè)備之外，北京冬奧會(huì)還實(shí)現(xiàn)了“自由視角觀賽”，即從3DoF（即眼睛可以向上下左右看）升級(jí)到6D0F（頭部位置也可以移動(dòng)）。這樣一來(lái)，觀眾就可以在任何位置觀看任何角度的比賽。

3DoF和6D0F的區(qū)別（圖源于網(wǎng)絡(luò)）

實(shí)際效果究竟怎么樣？我親自體驗(yàn)了一番，首先我用手機(jī)央視頻APP的VR冬奧觀看了2月16日的冰球男子1/4決賽。

當(dāng)進(jìn)入到相關(guān)頁(yè)面后，我看到畫(huà)面的正前方是一個(gè)虛擬的VR大屏，就像現(xiàn)場(chǎng)的大屏一樣，可以觀看到比賽的細(xì)節(jié)和回放。鏡頭隨后會(huì)轉(zhuǎn)到運(yùn)動(dòng)選手身上，我可以看到他們從起點(diǎn)出發(fā)的動(dòng)作，隨后畫(huà)面會(huì)隨著場(chǎng)上賽事的節(jié)奏自主切換角度，我也嘗試自己調(diào)整觀看角度，甚至我能看到他們擊中冰球入門(mén)的手勢(shì)動(dòng)作。

用手機(jī)端觀看冰球男子1/4決賽的畫(huà)面

在用手機(jī)觀看VR比賽時(shí)，我仍感到一些不足之處，比如說(shuō)，畫(huà)面清晰度還不是很高，畫(huà)面總會(huì)有一層灰蒙蒙的感覺(jué)，較正常的手機(jī)視頻清晰度略差一些。

但打開(kāi)VR設(shè)備后，我就不再吐槽滿是噪點(diǎn)的畫(huà)面清晰度了。我戴上Pico Neo 3設(shè)備，打開(kāi)央視頻VR APP，就進(jìn)入央視頻專為冬奧打造的觀賽空間，海報(bào)、抱枕、奧林匹克標(biāo)志，央媽一次拉滿了冬奧氛圍。

央視頻VR的觀賽區(qū)

不僅如此，央視頻還貼心地設(shè)計(jì)了定制個(gè)性化菜單，并在日歷中標(biāo)出每天將會(huì)有哪些賽事。連我最關(guān)心的獎(jiǎng)牌情況，央視頻都會(huì)清晰地呈現(xiàn)在下方。

無(wú)論是想按項(xiàng)目觀看比賽，還是想按日期觀看比賽，清晰、便捷的菜單設(shè)置都簡(jiǎn)化了我查找賽事的過(guò)程，讓我以最快的速度看到想看的比賽。

央視頻VR APP提供的多項(xiàng)觀賽項(xiàng)目

而觀賽的形式和手機(jī)上的體驗(yàn)比較類似，但整體上畫(huà)面清晰度大幅提升，我可以清晰地看到運(yùn)動(dòng)員做了哪些動(dòng)作，就好像站在賽道旁看著運(yùn)動(dòng)員從自己的頭頂飛過(guò)。

用Pico Neo 3 VR觀賽

與現(xiàn)場(chǎng)觀賽相比，我在VR觀賽中感到比較遺憾的可能是不能感受到整體現(xiàn)場(chǎng)的歡呼聲。但僅從觀看體驗(yàn)上來(lái)說(shuō)，用VR設(shè)備觀看比賽確實(shí)給人帶來(lái)不少驚喜。部分比賽過(guò)程中，導(dǎo)播們還通過(guò)AR技術(shù)給出一些信息，并告知觀眾賽場(chǎng)上不同賽事的最新情況。

除此之外，在觀看賽事的過(guò)程中，我常常還會(huì)因?yàn)閷?dǎo)播切換畫(huà)面而找不到運(yùn)動(dòng)員在哪里，從而錯(cuò)過(guò)精彩瞬間。

而手機(jī)上的H5界面多會(huì)采用360度全景圖片，向我介紹奧運(yùn)場(chǎng)館的相關(guān)信息，較少涉及比賽本身。

公開(kāi)信息顯示，軟件研發(fā)和服務(wù)公司天源迪科和中國(guó)聯(lián)通合作了“中國(guó)聯(lián)通冬奧5G智慧觀賽產(chǎn)品創(chuàng)新研發(fā)項(xiàng)目”，場(chǎng)內(nèi)聯(lián)通用戶可通過(guò)H5頁(yè)面或小程序接入場(chǎng)館邊緣媒體服務(wù)器，獲得多視角、精彩回放、場(chǎng)內(nèi)服務(wù)預(yù)訂等視頻服務(wù)及信息服務(wù)。

不僅如此，VR全景服務(wù)商蛙色VR也表示他們提供技術(shù)支持和新華社聯(lián)手打造360°沉浸式漫游場(chǎng)館。

用手機(jī)H5頁(yè)面觀看首都體育館

2、耗時(shí)長(zhǎng)、畫(huà)面卡，VR直播難題如何解？

“觀眾可以不斷地、連續(xù)地改變視點(diǎn)，從不同角度觀看同一個(gè)賽事。”項(xiàng)目負(fù)責(zé)人陳寶權(quán)說(shuō)，“不僅如此，還有機(jī)會(huì)實(shí)現(xiàn)電影《黑客帝國(guó)》中‘子彈時(shí)間’的炫酷體驗(yàn)。”

“子彈時(shí)間”是指某個(gè)凝固的時(shí)間點(diǎn)，人們通過(guò)360度全景攝像觀看到那一刻的所有人和物的畫(huà)面，也因此，實(shí)現(xiàn)“子彈時(shí)間”意味著觀眾可以實(shí)現(xiàn)觀看角度自由。

電影《黑客帝國(guó)》中展現(xiàn)的“子彈時(shí)間”

但在冬奧會(huì)的賽場(chǎng)上實(shí)現(xiàn)“子彈時(shí)間”并非易事。

要知道，按照傳統(tǒng)的拍攝方式，一臺(tái)攝像機(jī)一秒的8K畫(huà)面可能會(huì)有高達(dá)幾個(gè)GB甚至十幾個(gè)GB的內(nèi)容，而幾十臺(tái)攝像機(jī)同時(shí)構(gòu)建某一秒的畫(huà)面可能會(huì)用到近幾百GB大小的內(nèi)容素材，在過(guò)去，攝影團(tuán)隊(duì)想要制作一個(gè)“子彈時(shí)間”場(chǎng)景，往往需要花費(fèi)相當(dāng)長(zhǎng)的時(shí)間。

面對(duì)巨大的內(nèi)容素材，如何實(shí)時(shí)渲染畫(huà)面、如何呈現(xiàn)連貫的比賽畫(huà)面、如何實(shí)時(shí)完成360度全景觀看，這些都是擺在項(xiàng)目研究人員面前的難題。

據(jù)陳寶權(quán)介紹，解決這些問(wèn)題主要靠他們研發(fā)的“端到端自由視角視頻系統(tǒng)”和“VR冬奧賽事孿生推演與視聽(tīng)語(yǔ)言創(chuàng)意設(shè)計(jì)軟件”。

“端到端自由視角視頻系統(tǒng)”不但可以在較短的時(shí)間內(nèi)處理完龐大的圖像信息，同時(shí)還能通過(guò)三維重建生成新視點(diǎn)的圖像，避免因現(xiàn)場(chǎng)相機(jī)個(gè)數(shù)有限導(dǎo)致畫(huà)面不連貫?！叭绻捎米銐蚨嗟男拢ㄌ摂M）視點(diǎn)插入，最終實(shí)現(xiàn)絲滑般的自由視角觀賽體驗(yàn)?！标悓殭?quán)說(shuō)。

虛擬視點(diǎn)效果圖（來(lái)源：B站UP主阿里達(dá)摩院掃地僧）

而“VR冬奧賽事孿生推演與視聽(tīng)語(yǔ)言創(chuàng)意設(shè)計(jì)軟件”正是針對(duì)此前VR觀賽的遺憾之處——“不知道看哪里比較好”推出的軟件系統(tǒng)。

研究人員通過(guò)和一些專業(yè)人士合作，對(duì)賽場(chǎng)上可能會(huì)出現(xiàn)的精彩時(shí)刻設(shè)計(jì)視頻鏡頭軌跡，進(jìn)行實(shí)時(shí)導(dǎo)播，幫助觀眾抓住每一個(gè)熱淚盈眶的時(shí)刻。

VR冬奧賽事孿生推演與視聽(tīng)語(yǔ)言創(chuàng)意設(shè)計(jì)軟件演示圖（來(lái)源：北京大學(xué)）

從VR直播體驗(yàn)來(lái)看，北京冬奧會(huì)給觀眾提供了一個(gè)自由視角的VR直播，比賽畫(huà)面也較為流暢。而北京冬奧會(huì)在大規(guī)模賽事中運(yùn)用VR直播，以及實(shí)現(xiàn)360度高自由度觀看，也為VR技術(shù)在文娛領(lǐng)域的應(yīng)用增添新的成功案例。

二、既可以休閑，又可以訓(xùn)練，VR技術(shù)用途多多

VR技術(shù)帶給人們高度仿真的情景，讓人們不再受時(shí)間和空間的限制，可以瞬間進(jìn)入自己希望去往的地方。這一點(diǎn)在疫情下?lián)碛辛烁嗟囊饬x。此次冬奧會(huì)采用全封閉式管理的形式，如何給運(yùn)動(dòng)員們提供一個(gè)舒適、放松的環(huán)境，VR技術(shù)從中起到了不小的作用。

1、什么VR游戲讓運(yùn)動(dòng)員大呼過(guò)癮？

除了VR技術(shù)在直播賽事上的運(yùn)用吸引了不少人關(guān)注之外，VR游戲也“蹭”了一波冬奧會(huì)的熱度。在冬奧場(chǎng)館內(nèi)，VR游戲區(qū)的設(shè)備吸引了不少國(guó)外運(yùn)動(dòng)員在這里流連忘返，紛紛前來(lái)打卡。

冬奧場(chǎng)館內(nèi)的VR游戲區(qū)不僅有太空模擬艙、4D載人深海模擬器等，讓運(yùn)動(dòng)員們可以一天之內(nèi)上天入地，無(wú)處不去，還有模擬戰(zhàn)場(chǎng)、VR賽車等游戲，讓運(yùn)動(dòng)員們大呼“過(guò)癮”。

太空模擬艙

借著這次全民關(guān)注的運(yùn)動(dòng)盛會(huì)，游戲廠商紛紛推出VR冬奧系列IP如《奇幻滑雪》等。HTC更是接連上線了5款運(yùn)動(dòng)游戲，其中兩款游戲《奇幻滑雪3》、《VR冬奧會(huì)》是針對(duì)VR一體機(jī)推出的。三款游戲《極限滑雪》、《冰球大戰(zhàn)VR》、《Fantasy Skiing 2》是針對(duì)PC端推出的VR游戲。

其中，《奇幻滑雪3》是目前較為熱門(mén)的VR游戲，你可以通過(guò)VR設(shè)備感受到滑雪的樂(lè)趣。想成為下一個(gè)“谷愛(ài)凌”？你可以先用VR設(shè)備去體驗(yàn)一下滑雪的魅力。

《奇幻滑雪3》滑雪場(chǎng)景

目前，《奇幻滑雪3》登陸了Pico應(yīng)用商店等國(guó)內(nèi)多家VR設(shè)備的應(yīng)用商店。

2、用VR模擬真實(shí)環(huán)境，運(yùn)動(dòng)員開(kāi)啟“刷分”之路

像游戲之類的VR設(shè)備主要是給運(yùn)動(dòng)員們提供休閑娛樂(lè)，讓他們?cè)诰o張的賽程中放松一下繃勁的神經(jīng)，而用于VR模擬訓(xùn)練的設(shè)備則不同，更高的精準(zhǔn)度，更逼真的模擬環(huán)境才能為運(yùn)動(dòng)員們帶來(lái)更有效地成績(jī)提升。

像鋼架雪車、雪橇、越野滑雪等這類運(yùn)動(dòng)往往具有較高的風(fēng)險(xiǎn)性。同時(shí)，冰雪運(yùn)動(dòng)的訓(xùn)練計(jì)劃會(huì)受天氣和環(huán)境的影響，一年時(shí)間里訓(xùn)練較少。VR模擬訓(xùn)練器模擬的較為真實(shí)的虛擬環(huán)境，可以提供無(wú)限制的訓(xùn)練環(huán)境。并且，VR模擬訓(xùn)練器精準(zhǔn)收集的數(shù)據(jù)能夠?yàn)檫\(yùn)動(dòng)員提供更多指導(dǎo)方向。

“這樣一來(lái)，在一些技巧方面，運(yùn)動(dòng)員可以一天練習(xí)多次提高熟練度?！币晃粎⑴c研發(fā)的人士說(shuō)道，他們還為此打造了一套六自由度電動(dòng)模擬體育訓(xùn)練系統(tǒng)。

整理相關(guān)資料時(shí)，我們發(fā)現(xiàn)不少北方大學(xué)參與到VR訓(xùn)練模擬器研發(fā)中。

東北大學(xué)不但打造了一個(gè)VR滑雪系統(tǒng)，還做了個(gè)滑行速度測(cè)量機(jī)器人。機(jī)器人可以收集最真實(shí)的環(huán)境信息，再將這些信息同步到VR滑雪系統(tǒng)中，讓運(yùn)動(dòng)員們感受到最真實(shí)的環(huán)境變化，調(diào)整狀態(tài)。

河北地質(zhì)大學(xué)同樣也制造了一款VR滑雪模擬器，模擬真實(shí)的滑雪環(huán)境，其腳下的六自由度機(jī)器人可以跟隨滑雪地形進(jìn)行實(shí)時(shí)的響應(yīng)，為訓(xùn)練者提供視覺(jué)、聽(tīng)覺(jué)、風(fēng)感、轉(zhuǎn)向感、俯沖感、超重感、失重感等多感官交互，為滑雪者帶來(lái)沉浸式的滑雪體驗(yàn)。

現(xiàn)在，VR模擬訓(xùn)練在不少領(lǐng)域已經(jīng)開(kāi)始逐步落地，國(guó)外部分政府曾采用VR設(shè)備鍛煉員工的反應(yīng)能力。前不久，東方時(shí)尚公告采購(gòu)1000臺(tái)VR駕駛模擬器，金額達(dá)1.8億元。IDC數(shù)據(jù)顯示，2020年全球VR企業(yè)培訓(xùn)市場(chǎng)規(guī)模約為13億美元。

用VR設(shè)備模擬案件場(chǎng)景

VR訓(xùn)練在冬奧場(chǎng)景上的運(yùn)用，讓更多企業(yè)看到VR訓(xùn)練的實(shí)用性以及功能性，吸引更多的玩家加入其中。

三、虛擬數(shù)字人24小時(shí)為冬奧打工？谷愛(ài)凌再現(xiàn)分身術(shù)

說(shuō)起來(lái)你可能不信，據(jù)不完全統(tǒng)計(jì)，至少有25個(gè)虛擬數(shù)字人正在冬奧會(huì)24小時(shí)“打工”。

百度智能云AI人機(jī)交互實(shí)驗(yàn)室負(fù)責(zé)人、主架構(gòu)師李士巖曾告訴智東西，虛擬數(shù)字人可以按場(chǎng)景分為服務(wù)型數(shù)字人和演藝型數(shù)字人。其中，服務(wù)型數(shù)字人往往指具有一定功能的“虛擬員工”，演藝型數(shù)字人更偏向文娛領(lǐng)域的“偶像”。