9月5日，2020 Qualcomm XR生態(tài)合作伙伴大會(huì)暨第二屆XR創(chuàng)新應(yīng)用挑戰(zhàn)賽頒獎(jiǎng)典禮在江西南昌舉辦。以“開放共贏 擁抱5G”為主題，高通公司聯(lián)合XR設(shè)備廠商、運(yùn)營商、平臺(tái)供應(yīng)商、內(nèi)容提供商、當(dāng)?shù)卣萖R產(chǎn)業(yè)鏈上的合作伙伴，共同探討產(chǎn)業(yè)發(fā)展趨勢、XR與5G等移動(dòng)技術(shù)的融合，以及XR產(chǎn)業(yè)的未來發(fā)展機(jī)遇。 高通公司全球副總裁、全球XR業(yè)務(wù)負(fù)責(zé)人司宏國（Hugo Swart）表示：“多年來，高通公司不斷優(yōu)化驍龍移動(dòng)平臺(tái)，實(shí)現(xiàn)頂級(jí)XR體驗(yàn)所需的沉浸式音頻、視效和交互的支持。驍龍XR平臺(tái)現(xiàn)已支持客戶推出超過30款XR設(shè)備，其中涵蓋VR、AR和MR領(lǐng)域。”

今年是5G全球商用的第二年，而擴(kuò)展、融合和機(jī)遇成為接下來5G普及的核心關(guān)鍵詞。5G所帶來的新特性不僅賦能了智能手機(jī)，還將成為更多終端類型、更多行業(yè)發(fā)展的驅(qū)動(dòng)力，支持更多的應(yīng)用落地。 司宏國表示：“5G的優(yōu)勢為XR產(chǎn)業(yè)帶來全新機(jī)遇，在2020年，我們見證了過去一年我們一直談?wù)摰娜耎R設(shè)備形態(tài)的出現(xiàn)，即能夠與搭載驍龍855或865移動(dòng)平臺(tái)的5G智能手機(jī)相連的XR Viewer。這些纖薄、輕量化的XR Viewer有效利用手機(jī)算力和5G的高帶寬、低時(shí)延特性，對打造高品質(zhì)XR體驗(yàn)至關(guān)重要。”

遇見未來：XR終端新形態(tài)

2019年，是5G元年。盡管2020年受到疫情影響，但目前全球80家運(yùn)營商已經(jīng)完成部署5G商用網(wǎng)絡(luò)，超過385家運(yùn)營商正在投資5G。到2022年，5G智能手機(jī)出貨量將超過7．5億部，2023年5G連接數(shù)預(yù)計(jì)將超過10億，比4G獲得同樣連接數(shù)整整快了兩年。

高通公司產(chǎn)品市場高級(jí)總監(jiān)艾和志 目前，XR終端在教育、醫(yī)療、娛樂等各領(lǐng)域被廣泛使用。高通公司產(chǎn)品市場高級(jí)總監(jiān)艾和志表示：“目前來看，XR終端的演進(jìn)路線有兩條。”

第一條：現(xiàn)階段，常見XR終端形態(tài)以VR和AR一體機(jī)為主。未來1到4年，隨著5G技術(shù)普及VR／AR一體機(jī)處理、渲染被移至云端，同時(shí)保持終端設(shè)備算力，為消費(fèi)者提供更為成熟的雙6DoF、手勢識(shí)別等交互體驗(yàn)； 第二條：現(xiàn)階段，VR和AR Viewer的手機(jī)＋XR的分體式設(shè)計(jì)。未來1到4年，此類設(shè)備從有線變?yōu)闊o線，基于5G的低延時(shí)傳輸和手機(jī)性能提升帶來更好的XR體驗(yàn)。 未來5到十年，上述兩條發(fā)展路線將得到融合。

以小型化、無線化、多功能、5G傳輸為主導(dǎo)的XR設(shè)備終將代替手機(jī)，成為繼電腦、手機(jī)之后的下一代移動(dòng)計(jì)算平臺(tái)。 那么，高通公司是如何一步步推進(jìn)這一想法的呢？高通公司中國區(qū)XR業(yè)務(wù)負(fù)責(zé)人郭鵬表示：“高通在XR領(lǐng)域有四大策略。”

其一是芯片。從2016年推出的驍龍820／821移動(dòng)平臺(tái)開始，高通基于對移動(dòng)智能硬件領(lǐng)域的經(jīng)驗(yàn)，全面鋪開對XR終端設(shè)備處理器的迭代。首先宣布基于VR優(yōu)化的驍龍835移動(dòng)平臺(tái)，隨后推出專屬的驍龍XR1，XR2平臺(tái)。 去年12月，高通公司發(fā)布驍龍XR2平臺(tái)。其內(nèi)置5G調(diào)制解調(diào)器及射頻系統(tǒng)、支持60GHz無線連接、支持高達(dá)7路并發(fā)攝像頭以及6DoF頭部追蹤。 其二是底層軟件和算法。XR的交互方式與傳統(tǒng)顯示交互方式完全不同，除了頭手雙6DoF之外還會(huì)涉及到眼球追蹤、表情追蹤、語音輸入等新型技術(shù)。

對于XR2平臺(tái)來說，除了基本的六自由度時(shí)定位與地圖構(gòu)建（SLAM）等感知算法之外，高通公司還提供了對底層CPU、GPU、CVP的優(yōu)化，讓產(chǎn)品在更加省電的情況下性能達(dá)到極致。 其三是提供一體化參考設(shè)計(jì)。從驍龍821移動(dòng)平臺(tái)開始，每一代產(chǎn)品都伴有參考設(shè)計(jì)，其中包括硬件和軟件兩部分。

硬件層面，高通所提供的硬件參考設(shè)計(jì)是跟AR眼鏡、AR頭盔類似的原型機(jī)，這個(gè)機(jī)器非常的完善和全面，參考設(shè)備的配置非常高，用戶在基于它做設(shè)計(jì)的時(shí)候，基本是往下來做減法的。

軟件層面，會(huì)有很多軟件代碼、文檔、零部件選擇、原件圖、BCD設(shè)計(jì)參考這些。所有的都會(huì)開放給客戶，以縮短其研發(fā)周期，降低研發(fā)難度。 其四，基于參考設(shè)計(jì)，高通公司推出Qualcomm HMD加速器計(jì)劃、Qualcomm XR眼鏡適配計(jì)劃以及Qualcomm XR企業(yè)計(jì)劃。

Qualcomm HMD加速器計(jì)劃旨在吸引零部件領(lǐng)域或者技術(shù)合作伙伴的成員一起加入到項(xiàng)目計(jì)劃，讓他們的零部件和算法得以更加穩(wěn)定地運(yùn)行在驍龍XR2平臺(tái)上。 Qualcomm XR眼鏡適配計(jì)劃針對于輕薄型XR眼鏡和5G智能手機(jī)的連接，測試XR Viewer的性能并確認(rèn)其與智能手機(jī)之間的兼容性。XR眼鏡可以做到極致的輕薄，同時(shí)基于驍龍旗艦移動(dòng)平臺(tái)的5G智能手機(jī)可以承擔(dān)一部分渲染、計(jì)算工作，兩者結(jié)合提供沉浸式體驗(yàn)。

Qualcomm XR企業(yè)計(jì)劃的參與者滲透到各行各業(yè)，比如醫(yī)療、工業(yè)、消防、警務(wù)、文化旅游等等。通過與開發(fā)者直接溝通，高通希望開發(fā)者更加容易的基于驍龍平臺(tái)打造內(nèi)容生態(tài)，這有利于進(jìn)一步擴(kuò)大XR生態(tài)系統(tǒng)。 這些計(jì)劃旨在滿足XR行業(yè)的獨(dú)特需求，通過與內(nèi)容、技術(shù)和平臺(tái)提供商（包括OEM、ODM、手機(jī)廠商、運(yùn)營商、開發(fā)者和內(nèi)容提供商）的緊密合作，基于豐富的生態(tài)系統(tǒng)合作項(xiàng)目匯聚更多元的用例、資源和人才，從而促進(jìn)產(chǎn)業(yè)轉(zhuǎn)型和升級(jí)，并繼續(xù)推動(dòng)XR行業(yè)向前發(fā)展。

5G＋無界XR，產(chǎn)業(yè)發(fā)展新方向

上面說到，高通認(rèn)為最終的XR終端形態(tài)應(yīng)該是二者融合的樣子，這其中5G技術(shù)必不可少。 首先是分離式渲染。 無界XR，是高通公司正在發(fā)展的重要方向之一。無界XR允許XR終端在沒有任何束縛的情況下，用無線代替有線。通過無線傳輸由個(gè)人電腦、工作站或者云端渲染好的數(shù)據(jù)，在屏幕上顯示。

高通公司中國區(qū)XR業(yè)務(wù)負(fù)責(zé)人郭鵬 現(xiàn)階段，Oculus Quest、Pico Neo 2等產(chǎn)品均宣布支持了無界XR。盡管目前的連接方式還是Wi－Fi，但后期5G特性必將呈現(xiàn)出眾多優(yōu)勢。高通公司中國區(qū)XR業(yè)務(wù)負(fù)責(zé)人郭鵬表示：“Wi－Fi 6一推出，就有不少手機(jī)廠商相繼支持。這也是驍龍XR2平臺(tái)積極關(guān)注的方向之一。但是，從長期考慮5G仍會(huì)與其并行存在。” 未來，高通公司會(huì)基于驍龍XR2平臺(tái)特性令無界XR的分離式渲染不光服務(wù)于Wi－Fi連接的PC機(jī)到一體機(jī)的無線串流，更多的是滿足為5G商用落地之后，人們對于5G手機(jī)＋XR設(shè)備這種體驗(yàn)方式的新需求。 其次是AI算力。 驍龍XR2平臺(tái)的亮點(diǎn)在于，支持了7路并發(fā)攝像頭。郭鵬表示：“XR設(shè)備跟環(huán)境的交互基本上都是基于傳感器的視覺。即使不是通過視覺，其他的交互也都是通過攝像頭來進(jìn)行AI的處理。

所以，驍龍XR2支持非常強(qiáng)勁的CPU、GPU、CV－ISP，并且每一個(gè)模塊都是可以用來進(jìn)行一系列AI算法，開發(fā)者可以選擇算法運(yùn)行在哪個(gè)模塊上，這些是根據(jù)算法來決定的。” 當(dāng)開發(fā)者可以在更強(qiáng)勁加速模塊支持下運(yùn)行AI算法，也就意味著更穩(wěn)定的追蹤效果。 例如，在以前平臺(tái)實(shí)現(xiàn)完整的即時(shí)定位與地圖構(gòu)建（SLAM），包括定位、對環(huán)境、平面的識(shí)別以及對于光照和人臉的識(shí)別，可能會(huì)受到硬件的限制，在驍龍XR2平臺(tái)上有了更多的硬件加速模塊和傳感器，可以將更復(fù)雜的算法移植到硬件加速模塊上。 AI算力的提升，主要在兩個(gè)層面與5G息息相關(guān)。第一就是當(dāng)基于云端進(jìn)行AI算力處理的時(shí)候，就需要用5G傳輸?shù)絏R終端中；第二個(gè)就是當(dāng)內(nèi)容算力被移到云端，那么設(shè)備本身的算力空間就會(huì)增加，這也變相優(yōu)化了終端的運(yùn)算能力。 當(dāng)然，現(xiàn)階段技術(shù)瓶頸依舊是制約XR產(chǎn)業(yè)發(fā)展的最大問題之一。對此，郭鵬表示：“基于驍龍XR2平臺(tái)，我們具備了一整套面向客戶的解決辦法。抱著開放共贏的態(tài)度，高通除了上面提到的三個(gè)項(xiàng)目之外，也會(huì)給到開發(fā)者一系列技術(shù)方面的支持。

具體如下： 1、高通公司盡量通過統(tǒng)一底層API，讓即便是不同設(shè)備廠商發(fā)布自己SDK，也會(huì)盡量縮小廠商之間的差異。這種間接支持，可以優(yōu)化SDK和底層API之間的關(guān)聯(lián)性，進(jìn)而服務(wù)于國內(nèi)開發(fā)者； 2、XR應(yīng)用創(chuàng)新挑戰(zhàn)賽的獲獎(jiǎng)或者入圍者，高通公司會(huì)主動(dòng)邀請其加入高通XR企業(yè)計(jì)劃，提供培訓(xùn)和技術(shù)支持 3、高通開發(fā)者社區(qū)（QDN）。里面有很多模塊化或者工具化的東西可以直接獲取。 對于開發(fā)者而言，內(nèi)容的平臺(tái)移植伴隨著各種困難。高通公司希望從硬件底層來解決這一問題，顯然是個(gè)大工程。 據(jù)悉，高通現(xiàn)已和華碩、黑鯊、OPPO、vivo、一加、中興、Smartisan、中國移動(dòng)、中國聯(lián)通、中國電信等建立合作，從設(shè)備、技術(shù)、內(nèi)容平臺(tái)三個(gè)層面實(shí)現(xiàn)無縫連接的XR體驗(yàn)。

總結(jié)

高通公司產(chǎn)品市場高級(jí)總監(jiān)艾和志表示：“下階段正與合作伙伴研發(fā)的XR終端設(shè)備超過30款，隨著技術(shù)演進(jìn)、5G發(fā)展，渲染能力放在云端，同時(shí)保持終端側(cè)的計(jì)算能力，打造輕便化高性能XR終端。” 驍龍XR1和XR2平臺(tái)作為兩種不同定位的XR平臺(tái)，前者主打中高端，其具備獨(dú)有使用性能和特性；XR2更像是旗艦機(jī)的感覺，屬于XR終端的高配產(chǎn)品。 未來，基于高通公司驍龍XR2平臺(tái)打造的XR終端將陸續(xù)出現(xiàn)在市場。相信專為XR產(chǎn)品打造的設(shè)備在游戲性能、空間追蹤等方面會(huì)有更優(yōu)異的表現(xiàn)，而同樣催生出的一批好的內(nèi)容會(huì)吸引更多的玩家為其買單。 正如郭鵬所說，高通公司作為產(chǎn)業(yè)鏈上游的核心技術(shù)提供商，有責(zé)任推動(dòng)XR產(chǎn)業(yè)設(shè)備標(biāo)準(zhǔn)統(tǒng)一、聯(lián)合各方廠商一起創(chuàng)建一個(gè)豐富多樣的XR生態(tài)系統(tǒng)，也的確這樣做了。
責(zé)編AJX