直線、圖形、計算公式,草稿紙上滿是各類演算過程,沒一會,A4紙上就寫滿了字跡。在嘈雜的咖啡館內,VR直播的過程和技術關鍵點卻被解釋得很清晰。
“現在市面上說的4K VR直播,大多有水分,不清晰,畫面受損。VR直播說得很多,其實很多人并不了解。”金字塔VR創始人劉振兆說。
金字塔VR是一個年輕的團隊,成立于VR資本正熱的2016年初,期間卻一直埋頭研究,很少發聲,直到雞年戲曲春晚的VR錄播推出后,才借著春晚的熱度,嶄露頭角。獨角獸企業無所謂先來后到,金字塔VR曝光較晚,也不乏成為塔尖團隊的可能。
在VR直播大潮中,劉振兆直言金字塔VR的核心技術和優勢是“國內唯一能實現在普通網絡條件下呈現4-8K/360 /3D VR直播的團隊。
至于真假,看看你就知道。
戲曲春晚練兵
2016年12月,雞年春晚要進行VR直播的消息傳出,引發眾人期待。只不過臨到三十那天,原本宣傳的VR直播變成了錄播,讓人有些失望。
除了“大春晚”,其實央視平臺上另一個春晚節目也錄制了VR視頻,這就是金字塔VR操刀的戲曲春晚。金字塔VR一開始就決定采用錄播的形式,因為“春晚9月就開始籌備了,那時候團隊的技術還不是很成熟。”
(VR戲曲春晚截圖)
金字塔VR成立于2016年初,潛心研究直播技術一年多,積累了一套自研的4K VR直播的底層算法。
除了籌備時間不足,劉振兆也透露,春晚難以做VR直播的原因還在于“容易穿幫”。就戲曲春晚的經驗,現場會布置VR攝影機和傳統攝影機。傳統攝影機的機位在觀眾席靠后方,而為了達到最好效果,VR攝影機需要放在前排。若兩者同時工作,必然會將另一臺攝影機明顯地收入畫面中。尤其是“戲曲廣播體操”這個節目,VR攝影機被放置在演員中間,更會影響傳統攝影。
“戲曲春晚本身就是錄播,為了增加VR觀看這個渠道,基本每個節目都需要演兩遍。這樣的演員調度不可能出現在 大春晚 ,而且VR模式,對演員的入場出場、觀眾調控都是很大的考驗。”
熱點愛上VR直播
不知從何時起,如果一場大型活動沒有進行VR直播,就顯得有些過時。
VR直播不是新鮮事物,早在2015-2016 NBA賽季中,Next VR就用VR技術進行了一次籃球比賽直播。
2016年,VR直播似乎搭上了“直播”的快車,開始變得熱門,每個星期都有大把的VR直播的流量穿過網路,來到用戶的手機端。
普華永道曾有一個VR直播市場預言:預計到2020年,VR事件直播市場規模將達到7.5億美元,2025年達到41億美元;預計2020年用戶量為2800萬,2025年將增加到9500萬。
VR潮流帶來了不少資本和創業者的進入,嘗試者眾多。
說到VR直播,你能想到哪些作品?
王菲演唱會、雞年春晚、中超足球比賽、全國兩會,除了這類大型IP,很多不太知名的真人秀、發布會、慶典活動、手術現場也采用過VR直播。涉入的企業包括Youtube、VALVE、芒果TV、微鯨、樂視、蝸牛云、花椒直播、優酷土豆等。
實際上,VR直播可以應用的場景確實有開發的價值,比如體育、新聞事件的直播、教育課程、醫療現場的直播。
斗法之下,一些具有先發優勢的企業現在VR圈內站穩了腳跟,比如拿下春晚VR錄播的蘭亭數字,以及和中超合作的微鯨。
你有張良計,我有過墻梯,即便沒有先發優勢,新入場的玩家也有可能通過技術逆襲。
小白也看得懂的直播原理
正常戲曲春晚做下來,金字塔VR得到的主辦方反饋是“比想象中要好,清晰度高”。
得到這樣評價的背后,有一句潛臺詞:現在的VR直播清晰度不盡如人意。
在知乎平臺上有這么一個問題,“為什么王菲VR直播的分辨率號稱4K看起來還是不夠清晰?” 網絡上一些評論文章也認為演唱會畫面模糊。
此外“經常卡頓”、“延時嚴重”也是VR直播經常得到的反饋。
VR直播坑這么多,是這屆觀眾不行,還是VR直播這事本身就不靠譜?
要解答這些問題,需要先從VR直播原理說起。
拍攝、實時拼接、云轉碼服務帶寬壓縮、CDN、全平臺用戶體驗,這是VR直播完整的一整套步驟。
決定VR直播畫面的因素之一是原片質量,劉振兆以戲曲春晚為例,金字塔VR使用OZO拍攝,雖然這算是第一階梯的設備,但是在實踐的過程中,發現對焦是不可智能調節的。“春晚現場有很多射燈,燈光條件復雜,使得OZO拍攝的對焦可能會對焦在演員后面的大屏幕上,演員的臉反倒看不清楚。有時候還會出現噪點。”
原片質量不達標,就需要后期技術修正。
另外一個因素則是傳輸帶寬的限制。
直播和錄播不同,錄播是可以緩存的,比如可以緩存10秒的內容,即便遇到網絡抖動,個別畫面傳輸不暢,用戶也可以先觀看緩存好的。
但是直播不同,直播要求延遲低,需要網絡帶寬足夠,網絡環境穩定,這樣現場的畫面才能及時、完整地傳輸。VR直播又是大碼率的傳輸,更需要把帶寬降下來。
帶寬降下來,再降一點
根據全球最大的CDN服務商Akamai公司的統計,2015年中國平均網速只有3.7Mbps,而4K流媒體直播需要達到15.6Mbps。兩車道需要容納八車道那么大的車,自然會擁擠。
按照金字塔VR的算法,可以將視頻壓縮到原來的80%,就可以實現4K碼率最低1.5Mb/s、8K 碼率最低6Mb/s。
劉振兆簡單解釋了金字塔VR所使用的兩種基本的壓縮方法。
“VR是360 ,人眼在前面,看不到后面,視頻要優先保證眼前是最高清的,后面的清晰度會逐漸變低,這樣數據量就小了。
第二個原理有點類似于 圖片有碼,也要做到心中無碼 ,比如我的手機被擋住了一部分,但我們依然可以腦補出手機的全貌。一張低清晰度的圖片傳輸到用戶端之前,可以通過機器學習的超分辨率技術,在播放端變成清晰的樣子,前提是這個機器知道圖片原本的樣子。
這項技術可以針對一些特定的產品,比如足球比賽,球門、賽場、比分板等,都是固定且特定的場景,這些場景可以在傳輸的時候模糊處理,顯示的時候高清呈現。”
金字塔VR測算了《少女舞團》相同畫質情況下的流量對比:傳統技術耗費流量352MB,金字塔VR方案只用了93.1MB。同時,在相同碼率(2.5Mbps)情況下對比畫質,金字塔VR的截圖更清晰。
根據金字塔VR的測算,這項技術能夠節省帶寬成本的80%,以王菲演唱會為例,如果10萬人同時通過VR觀看4小時,這套算法就能為微鯨節省36萬元;再比如柳巖花椒直播,最高在線600萬人通過VR觀看2小時,則能為花椒節省1080萬元。(VR帶寬在10Mb/s左右,成本是普通直播的10倍,如果是8K直播,則是普通成本的40倍)。
除此之外,金字塔VR已經和國內前三的CDN服務商藍汛完成VR直播CDN共建,和阿里云技術對接中,率先共建VR CDN。
水分擠擠就有了
不少涉足VR直播的企業都將“壓縮帶寬”作為自己的核心技術,但就像VR相機一樣,夸大的成分不少。
需要明確的是,“4K”指的是分辨率,4096*2048,一張圖片的清晰度是可以壓縮的,兩個同樣大的圖片,畫質高和低,數據量大小是不一樣的。就像壓縮包,壓縮率調到90%和40%,清晰度是不一樣的,雖然看上去尺寸是一樣的。
“有些公司宣稱可以降低帶寬50%,但是畫質有損。比如用戶的正前方垂直方向20 左右視角的畫面非常清晰,但是朝著上下45 的方向擴展,畫質損失會非常嚴重,圖像也很模糊。還有一些使用了H.265技術的企業,能節省40%的帶寬,但是在終端播放時兼容性差,手機觀看一會就發燙。H.265是個公開技術,每家技術企業都可以使用。”
劉振兆將核心技術比喻成“火箭上太空”,物理知識和原理是通用的,只不過各個國家起步早晚和研發的時長不同。
對于金字塔VR所使用的技術,劉振兆透露,目前只有3家能做到,除了金字塔VR,只有國外公司Pixvana、Visbit有實力。“當然,不排除其他公司研發出來,但是就時間點來說,會比金字塔VR晚至少一年。”
沒好平臺,再清晰的畫面也出不來
受制于大網絡環境,用戶在觀看VR視頻時,只能接受被視頻網站壓縮成1080P的視頻。
4月底,金字塔VR上線了一款APP,類似微吼直播平臺,專攻商務4K VR直播,而且不會在播放端壓縮畫質。
劉振兆透露,金字塔VR全平臺適用,可實現內容從拍攝,處理,上傳到被用戶觀看的全部流程。根據目前公司的規劃,重點接受商務業務直播,比如發布會、會議、活動、講座等,不堪忍受普通視頻網站VR直播效果的客戶,可以在金字塔VR APP中實現需求。
對于未來的規劃,劉振兆表示會攻克 3D VR直播的難點,3D的加入,傳輸的數據量會是目前的兩倍,未來VR發展到了8K,更是會產生龐大的數據量。
“金字塔VR的核心業務是 4K VR直播,對于目前的市場,希望所有進入的團隊都能做到真4K,而不是低質量畫面模糊的直播。只有整個直播大環境好了,每個企業才能受益。”
“應該說目前的真VR直播技術還略有不足,大規模的技術完善需要一年左右的時間,一旦技術完善,假VR直播可能以其廉價繼續存在一段時間,因此保守估計兩年,市場會驅逐劣幣。”
-
虛擬現實
+關注
關注
15文章
2297瀏覽量
98657 -
vr
+關注
關注
34文章
9666瀏覽量
152058
發布評論請先 登錄
Matter如何終結智能家居生態割據,重構你的居住體驗?

為什么高壓電機大多數采用星型接法?

大多數FPGA的程序存儲器(FLASH)為什么都放在外面呢?FPGA的主要應用

ADS8472采集進來的數據大多數是1039(040F),3087(0C0F),為什么?
NVIDIA加速全球大多數超級計算機推動科技進步




30s高能速遞 | 第三屆 OpenHarmony技術大會精彩搶鮮看
未來車間大多數人工將被機器代替,立柱機器人建材行業應用

c語言中從左到右結合怎么看

評論