高通中國區VR/AR負責人 郭鵬:XR要成功,最關(guān)鍵、最底層的技術(shù)就是空間計算
郭鵬表示,空間計算包含兩個(gè)重要層面,一個(gè)是對于人類(lèi)自身用戶(hù)的感知,另一個(gè)是對于空間的感知。
2021年12月10日,由廣東省游戲產(chǎn)業(yè)協(xié)會(huì )、廣東省虛擬現實(shí)產(chǎn)業(yè)技術(shù)創(chuàng )新聯(lián)盟、深圳市科學(xué)技術(shù)協(xié)會(huì )、深圳市互聯(lián)網(wǎng)文化市場(chǎng)協(xié)會(huì )指導,陀螺科技主辦,深圳市科技開(kāi)發(fā)交流中心、恒悅創(chuàng )客魔方協(xié)辦,行業(yè)頭部媒體游戲陀螺、VR陀螺、陀螺電競、陀螺財經(jīng)、陀螺傳媒聯(lián)合主辦的2021未來(lái)商業(yè)生態(tài)鏈接大會(huì )暨第六屆金陀螺獎頒獎典禮(簡(jiǎn)稱(chēng)“FBEC2021”)在深圳大中華喜來(lái)登酒店6樓宴會(huì )廳盛大開(kāi)幕!
在中國力量·2021 5G XR產(chǎn)業(yè)峰會(huì )現場(chǎng),高通中國區VR/AR負責人郭鵬:以“面向下一代XR打造的Spaces”為主題發(fā)表了演講。
以下為演講實(shí)錄:
今天很熱鬧,一年一度的FBEC又開(kāi)始了,今年果然來(lái)了很多的人,這跟我們的預想很符合。
剛才叢青講了很多遠期、宏觀(guān)的元宇宙暢想,高通作為產(chǎn)業(yè)鏈上游的公司,作為芯片的供應商和軟件底層算法的供應鏈,從近期著(zhù)手分析一下為什么XR能發(fā)展到今天,原因是什么?找到原因再看接下來(lái)做什么?高通又做了什么?
雖然幾萬(wàn)年以前,人類(lèi)是生活在一個(gè)三維的世界,但是我們記載信息和傳承信息的方式一直都是平面的,最早在巖壁上鑿字鑿畫(huà),到后來(lái)用紙來(lái)書(shū)寫(xiě),再后來(lái)有了屏幕,有了筆記本,有了平板,所有這些東西都有一個(gè)共同的特點(diǎn):二維、平面。但是我們生活在三維的世界當中,為什么不能通過(guò)三維的方式來(lái)傳遞信息、傳承文明呢?從2D到3D,從平面到立體,就是從目前已有消費類(lèi)的電子產(chǎn)品到XR轉變的一個(gè)根本原因。
所以XR在未來(lái)一定會(huì )承載很大的一部分責任來(lái)推進(jìn)人類(lèi)文明。在這里面,我們負責最底層的技術(shù),所以我們總結下來(lái),XR要成功,最關(guān)鍵、最底層的技術(shù)就是空間計算??臻g的計算包含兩個(gè)特別重要的層面:
對于人類(lèi)自身用戶(hù)的感知。一套設備或者這一套系統能清楚地知道用戶(hù)是什
么狀態(tài),在干什么?在看什么?想要做什么?手、腳、眼球、嘴唇是什么樣的狀態(tài)。
對于空間的感知。設備能夠知道我處于什么樣的環(huán)境,環(huán)境有什么樣的特點(diǎn),
我面對什么樣的人。
用戶(hù)的感知和空間的感知組成了空間計算,有了底層的技術(shù)再加上內容/算法的加持,高通堅信XR是下一代移動(dòng)計算平臺,未來(lái)物理屏幕可能會(huì )消失,取而代之的是世界會(huì )成為你的屏幕,這是我們對于XR的愿景。
回到實(shí)際的數據或者未來(lái)幾年的數據預測,根據一些咨詢(xún)公司和我們的整理,預測:XR頭顯硬件的出貨量會(huì )從2020年的700萬(wàn)臺,增長(cháng)到2024年的5700萬(wàn)臺,單價(jià)預測平均在500美金,硬件的銷(xiāo)售額可以高達310億美元,這還僅僅是硬件的銷(xiāo)售。
但元宇宙有很多層,最核心的是底層的硬件等,上面還有硬件和互聯(lián)網(wǎng)等,整個(gè)產(chǎn)業(yè)加起來(lái)會(huì )比310億美元高1-3個(gè)量級,所以這是非常具有想象空間的一個(gè)行業(yè)。
在具體的硬件形態(tài)上主要有兩種在同步往前發(fā)展,首先是一體機,從AR一體機到VR一體機,現在一體機的功能變得越來(lái)越多,體積和成本也做得越來(lái)越優(yōu)化,一體機形態(tài)將會(huì )繼續往前走下去。VR目前以游戲為主,現在開(kāi)始出現一些社交、電商、短視頻甚至是智能汽車(chē)方面的一些應用擴展。AR目前在工業(yè)類(lèi)和行業(yè)應用上更多,這是AR眼鏡作為手機智能附件的一個(gè)拓展,相當于手機的另外一塊屏幕,或者另外一個(gè)顯示輸入/輸出的接口。因此我們把它定義為XR智能頭顯,它會(huì )緊跟著(zhù)手機產(chǎn)業(yè)的步伐往前走。這個(gè)發(fā)展的趨勢會(huì )從簡(jiǎn)單到更加多能化,以有限到無(wú)限的方式去發(fā)展。
所以在不久的未來(lái),我們可以看到跟手機搭載的智能頭顯出現,它可能利用的是手機的算力、生態(tài)和產(chǎn)業(yè)鏈,但是能給到用戶(hù)遠遠超出手機的體驗,這就是未來(lái)智能頭顯的機會(huì )。在更遠的將來(lái),這兩者可能會(huì )融合起來(lái)。未來(lái)還有很多的難題需要去解決,比如電池和光學(xué),都具有挑戰性,但是有挑戰就有機會(huì )。光學(xué)和電池交給業(yè)內其他領(lǐng)域的合作伙伴們去解決,我們來(lái)解決CPU主芯片這邊的難題。
高通除了發(fā)布多款芯片,在軟件算法、空間計算、用戶(hù)感知、空間感知、以及針對不通的零部件和生態(tài)系統的參考設計上,也為用戶(hù)大大減少了設計的周期和開(kāi)發(fā)的難度。在今年AWE發(fā)布的Spaces就是專(zhuān)門(mén)為AR/MR打造的AR開(kāi)發(fā)者平臺,所有這些都是我們在生態(tài)系統上所做的事情。你可能認為高通是一個(gè)提供芯片的公司,但是我們不僅僅是提供芯片,我們在生態(tài)上也做了很多事情,除了芯片以外,高通還提供很多底層軟件、算法、整套設計等等。
我們還有很多生態(tài)合作伙伴,有客戶(hù),ODM廠(chǎng)商和OEM廠(chǎng)商、很多優(yōu)秀的解決方案以及很多零部件的合作伙伴,來(lái)一起打造整個(gè)解決方案。面對全球的供應商,高通將在未來(lái)打造XR+5G的融合。目前,已經(jīng)有超過(guò)50款產(chǎn)品在市場(chǎng)上發(fā)布或者銷(xiāo)售,主要的芯片平臺是XR1以及XR2,XR2目前依然是我們很多廠(chǎng)商主流的選擇,它配置有5G的功能,有強大的多媒體處理能力和光學(xué)能力,所以在目前的時(shí)間節點(diǎn),如果客戶(hù)想要與我們合作,XR2是一個(gè)很好的選擇。
在今年11月美國的AWE上,高通隆重發(fā)布了Spaces平臺--驍龍Spaces。這是一個(gè)
面向MR/AR的開(kāi)發(fā)者平臺,助力開(kāi)發(fā)者打造與物理世界融合的頭戴式體驗。它包含了三個(gè)層面的東西:
首先,是技術(shù)與創(chuàng )新,其中很多底層的技術(shù)是我們一手開(kāi)發(fā)的;
其次,它是一個(gè)開(kāi)放跨終端的生態(tài)系統。開(kāi)放、跨終端不僅指對上層、同一層,還是對于下層,所以它的兼容性非常好;
第三,它是一個(gè)開(kāi)發(fā)者優(yōu)先的平臺,旨在讓開(kāi)發(fā)者在不增加額外開(kāi)發(fā)投入的情況下,就可以將他們目前已有的東西從別的場(chǎng)景/別的平臺,比如手機和平臺,很快地遷移到驍龍Spaces這個(gè)平臺上。
接下來(lái),我們通過(guò)一段視頻來(lái)看一下Spaces到底為AR這個(gè)場(chǎng)景提供了哪些東西?
請大家忽略視頻中眼鏡上那條線(xiàn),這只是我們內部的原型機,隨著(zhù)技術(shù)的迭代,相信我們的產(chǎn)品不僅會(huì )是無(wú)線(xiàn)的形式,也會(huì )變得越來(lái)越小。剛才視頻里提到了這么多的場(chǎng)景,里面包括手勢識別、圖形識別、空間定位和錨點(diǎn)的持久性、物體的檢測和跟蹤、空間的遮擋關(guān)系、平面檢測、頭部的定位、場(chǎng)景的識別以及空間地圖的構建,所有這些功能都可以把目前設備的功能擴展到一個(gè)三維的空間。
高通在前不久也宣布了對兩家公司的收購,一家是Wikitude,這是一家主要做物體識別跟蹤的公司,目前有超過(guò)15萬(wàn)名的開(kāi)發(fā)者在手機上開(kāi)發(fā)應用,我們也可以很快把開(kāi)發(fā)者的東西從手機和平臺上遷移過(guò)來(lái)。還有一家是Clay(做手勢的公司)。我們在A(yíng)WE上還宣布了合作伙伴,不僅包含了開(kāi)發(fā)者平臺、開(kāi)發(fā)者引擎,還包括了手機廠(chǎng)商和國內外運營(yíng)商,因此這將是一個(gè)開(kāi)放的跨生態(tài)的AR系統。
Spaces平臺能夠把目前已有的APP直接投射于空間當中,在空間中可以操縱它的大小、遠近和位置,并且不需要開(kāi)發(fā)者做額外的工作。如果APP本身是帶3D的內容,比如AR購物,那么可以在手機上通過(guò)撥動(dòng)和旋轉去改變它在實(shí)際空間中的大小位置,實(shí)現與空間的完全匹配,例如買(mǎi)沙發(fā),原本手機是通過(guò)攝像頭來(lái)看,但是Spaces平臺可以讓你看到的虛擬的沙發(fā)與物理世界是完全契合的。
我們?yōu)槭裁茨茏龅饺绱擞押媚兀?/strong>
第一,為領(lǐng)先3D引擎Epic Games虛幻引擎4和Unity提供SDK支持;
第二,讓開(kāi)發(fā)者使用熟悉的3D工具進(jìn)行創(chuàng )作,比如Unity編輯器、Unity AR基礎套件和Unity MAR,這些都是基于插件跑到Spaces上;
第三,穩健的資源庫,包括文檔、示例代碼、教程、知識庫和工具,都會(huì )開(kāi)放給開(kāi)發(fā)者和廠(chǎng)商。
同時(shí)我們?yōu)閮?yōu)質(zhì)的開(kāi)發(fā)者提供很好的資質(zhì)包的支持,包括應用、開(kāi)發(fā)套件、聯(lián)合推廣和技術(shù)支持,這些都是我們?yōu)榱素S富生態(tài)而做的一些事情。Spaces包含了底層技術(shù)的創(chuàng )新,它是友好的跨終端平臺,對于開(kāi)發(fā)者開(kāi)發(fā)的遷移工作量也非常友好。這個(gè)平臺現在已經(jīng)發(fā)布了,最早明年春季就可以面向市場(chǎng),高通期待與開(kāi)發(fā)者一起來(lái)打造整個(gè)生態(tài)。
我今天的分享就是這些,謝謝大家!
最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!
硬科技產(chǎn)業(yè)媒體
關(guān)注技術(shù)驅動(dòng)創(chuàng )新
