FBEC2023 | Tobii 亞太區XR負責人吳柏其：Tobii在XR在行業(yè)看到的四大未來(lái)趨勢

XR設備的眼動(dòng)性能要能讓至少百分之95(P95)的人可以在目標應用達到良好體驗。而用于全球消費級XR設備則建議P98水準。

FBEC2023未來(lái)商業(yè)生態(tài)鏈接大會(huì )暨第八屆金陀螺獎?dòng)?023年12月8日在深圳福田大中華喜來(lái)登酒店6樓盛大召開(kāi)，本次大會(huì )由廣東省游戲產(chǎn)業(yè)協(xié)會(huì )、深圳市互聯(lián)網(wǎng)文化市場(chǎng)協(xié)會(huì )指導，陀螺科技主辦，中國光谷、游戲陀螺、VR陀螺、陀螺財經(jīng)、陀螺電競聯(lián)合主辦。

大會(huì )以“合力共生·韌者行遠”為大會(huì )主題，以具有行業(yè)前瞻洞察的“航行者”為視角，破冰之旅為主線(xiàn)，關(guān)注AI、元宇宙、XR、游戲、電競、數字經(jīng)濟等科技與互聯(lián)網(wǎng)前沿領(lǐng)域，全方位呈現科技前沿成果，聚焦時(shí)代與商業(yè)熱點(diǎn)議題，探討新科技、新商業(yè)、新模式的未來(lái)價(jià)值，與真正的勇者共赴劇變革新下的凜冬破冰之旅！

主會(huì )場(chǎng)C：元生未來(lái)，共鏈價(jià)值——2023全球元宇宙產(chǎn)業(yè)核心技術(shù)論壇，邀請到Tobii 亞太區XR負責人吳柏其帶來(lái)主題為“Tobii眼球追蹤在XR的未來(lái)趨勢”的精彩演講。吳柏其認為，XR設備的眼動(dòng)性能要能讓至少百分之95(P95)的人可以在目標應用達到良好體驗，而用于全球消費級XR設備則建議P98水準。

以下為演講實(shí)錄：

非常感謝陀螺科技的邀請！今天我為大家分享的是Tobii在XR行業(yè)看到的未來(lái)趨勢。

Tobii是一家成立超過(guò)20年，主打注意力計算、眼球追蹤的科技公司。公司總部位于瑞典，并于2015年在瑞典成功上市，至今已擁有超過(guò)700項專(zhuān)利及申請中專(zhuān)利。Tobii在全球設有14個(gè)辦事處，總計超過(guò)600名員工，國內蘇州和上海兩個(gè)辦事處有50名員工, 其中包含提供XR硬件、軟件和項目支持的專(zhuān)屬團隊。

自2010年開(kāi)始，Tobii就自研并發(fā)布了不帶屏幕的眼動(dòng)追蹤AR眼鏡，如今已經(jīng)升級迭代到了第三代。此外，我們也和HTC, Pico, HP等合作伙伴推出過(guò)幾款不同的VR頭顯，包括與高通合作數代的參考設計、與索尼合作的PS VR2都采用了Tobii的眼動(dòng)追蹤技術(shù)方案。預計到明年，Tobii眼動(dòng)追蹤技術(shù)還將應用到更多合作伙伴的新品中。

在與這些XR領(lǐng)域客戶(hù)的合作過(guò)程中，Tobii也觀(guān)察到了一些行業(yè)的趨勢。

一是，我們認為眼球追蹤會(huì )在XR領(lǐng)域成為標配功能, 這也意味著(zhù)會(huì )有越來(lái)越多人能夠接觸到眼球追蹤的應用。這代表XR硬件商現在就必須開(kāi)始打好基礎。

眼球追蹤紙上談兵比較容易，可放在實(shí)際使用狀況之下卻變得相當棘手，例如在人因或使用狀況比較復雜的情況下，如何讓使用者享受到好的使用體驗成為XR廠(chǎng)商必須正視的難點(diǎn)。

此外，如何保證不同種族、年齡層、性別、有無(wú)佩戴眼鏡, 化妝、使用設備過(guò)程中產(chǎn)生的滑移等人群在不同使用狀況之下，都能擁有好的眼動(dòng)用戶(hù)體驗，也是我們關(guān)注的焦點(diǎn)。

我們在這建議通過(guò)幾個(gè)簡(jiǎn)單的參考依據來(lái)快速評估眼球追蹤的優(yōu)劣，第一, 不能只看諸如“0.5度”的單一數據，而是應該參考分析在人群覆蓋下各個(gè)注視角度下的數據。例如我們會(huì )將“P95人群覆蓋, 注視角度20度時(shí)的準度是2度”作為一個(gè)評判標準。此外，我們在做出判斷時(shí)也需要參考人群數據庫的組成配置以及自身主觀(guān)的佩戴體驗, 例如戴著(zhù)眼鏡親自嘗試一臺眼動(dòng)設備。

關(guān)于相關(guān)性能評估、人群覆蓋的劃分，大家可以關(guān)注Tobii發(fā)布的白皮書(shū)，目前業(yè)界針對眼球追蹤的評判也是以Tobii的白皮書(shū)為主，歡迎大家掃碼下載。

第二個(gè)趨勢是，用戶(hù)未來(lái)需要更長(cháng)時(shí)間享受帶眼動(dòng)追蹤的設備。

在諸如娛樂(lè )和生產(chǎn)等一些比較重點(diǎn)的應用場(chǎng)景，使用者會(huì )花費更長(cháng)時(shí)間在媒體、體育賽事、游戲、虛擬會(huì )議以及辦公上，加上市場(chǎng)對眼動(dòng)追蹤的認可，眼動(dòng)追蹤也將是長(cháng)期開(kāi)啟的功能之一，由此帶來(lái)的一個(gè)技術(shù)挑戰就是如何大幅降低眼動(dòng)追蹤系統帶來(lái)的功耗。

到明年，Tobii的眼動(dòng)追蹤系統將會(huì )實(shí)現低于110mW的功耗，這跟Tobii過(guò)往的眼動(dòng)系統方案相比，功耗降低超過(guò)了50%。在整個(gè)系統的視覺(jué)模塊部分擁有單眼單顆攝像頭，單眼10顆紅外燈的情況下，我們可以達到低于50mW的功耗。此外，我們的算法也已經(jīng)加入高通XR2 Gen2最新的芯片平臺，已經(jīng)以低于60mW的功耗實(shí)現了非常漂亮的數據，而這個(gè)數據明年還有繼續優(yōu)化的空間。

第三個(gè)趨勢則是極致的眼動(dòng)交互體驗。

大家耳孰能詳Apple vision pro其中一項重點(diǎn)功能就是透過(guò)眼球追蹤及手勢識別達到更自然的交互方式。 

為了讓我們的合作伙伴創(chuàng )造極致的眼動(dòng)交互體驗，Tobii推出了G2OM算法。這是一種對象選擇算法，可以根據眼動(dòng)數據的輸入和虛擬場(chǎng)景的內容更加準確預測用戶(hù)正在看什么。 目前我們G2OM算法的測試版已經(jīng)對外公開(kāi)，歡迎大家來(lái)我們開(kāi)發(fā)者官網(wǎng)查看介紹的視頻并下載嘗試 https://developer.tobii.com/xr/solutions/。

第四個(gè)趨勢是無(wú)限接近普通眼鏡形態(tài)的硬件設計。

我們認為，未來(lái)的AR眼鏡也會(huì )導入眼球追蹤功能，但AR對外觀(guān)及重量的訴求更多。如何在兼顧兩者的情況下做出好的產(chǎn)品對于A(yíng)R眼鏡廠(chǎng)商至關(guān)重要。

早在3年前，Tobii就看到了未來(lái)AR眼鏡的這種趨勢，因此我們并購了一家專(zhuān)門(mén)做冷鑄造工藝的瑞士光學(xué)公司。通過(guò)冷鑄造工藝，我們把眼球追蹤器件直接嵌入到鏡片里面，成功創(chuàng )造出更高品質(zhì)、更輕量化的眼鏡。這種冷鑄造工藝有不同的應用范例，且大部分都是集中在XR領(lǐng)域，既可以制作Pancake透鏡，或者是嵌入不同的組件、光學(xué)膜、自由空間組合器，也可以用來(lái)鑄造波導，包括在處方鏡片中鑄造波導。

在這里還想給大家介紹一下Tobii AR眼鏡的設計概念。一款不帶邊框輕量化眼鏡設計。這樣的設計使眼鏡鏡片的下方?jīng)]有邊框，相對應的波導、眼動(dòng)紅燈外以及FPC鑄造進(jìn)透鏡里，眼球追蹤用的攝像頭則集成到眼鏡鼻托位置。

其次，是整合度更高的輕量化透鏡。遵循高度整合的概念，我們把推/拉透鏡、眼動(dòng)器件、波導、電子變色片全部鑄造進(jìn)同一個(gè)鏡片里面，我們認為這很有可能就是未來(lái)AR鏡片的設計形態(tài)。我們已經(jīng)跟國內及國外XR大廠(chǎng)展開(kāi)了諸多采用Tobii冷鑄造工藝的預研項目, 大家也對最終落地到量產(chǎn)項目里充滿(mǎn)信心。

Tobii在注意力計算、眼球追蹤領(lǐng)域耕耘超過(guò)20年。在XR領(lǐng)域，從硬件、軟件、算法、數據、生產(chǎn)各方面都有獨特的優(yōu)勢存在。特別是生產(chǎn)方面，我們的客戶(hù)中已經(jīng)有幾百萬(wàn)臺的XR設備導入了Tobii的眼動(dòng)方案。希望在未來(lái)，Tobii能夠有更多的機會(huì )和大家開(kāi)展更深層的合作，謝謝大家！

掃碼了解更多信息：

最后，記得關(guān)注微信公眾號：鎂客網(wǎng)（im2maker），更多干貨在等你！