七鑫易維黃通兵:追求更自然的人機交互,眼球追蹤技術(shù)正在路上
“行業(yè)內的公司既有被收購的,也有自己獨立上市的,所以一切皆有可能吧?!?/p>
最近,微軟在win 10 的最新版本中,加入了“眼球追蹤”功能,通過(guò)凝視來(lái)完成一些基本的文本輸入操作,而之所以會(huì )增加這個(gè)功能,微軟表示想要幫助那些患有神經(jīng)肌肉疾病的人,比如漸凍癥患者,讓他們直接用眼神和系統中各種元素交互。
眼球追蹤技術(shù)似乎正在一點(diǎn)點(diǎn)侵入到我們的生活。去年,七鑫易維推出了全球首款VR眼球追蹤模組aGlass,展現了他們的注視點(diǎn)渲染、眼控交互和眼動(dòng)數據分析三大“黑科技”。
從最早的醫療輔具到PC上的輔助再到虛擬現實(shí)體驗,今天我們就和七鑫易維的創(chuàng )始人黃通兵聊聊眼球追蹤技術(shù)。
被收購or自己成長(cháng)壯大,一切皆有可能
黃通兵是在2009年創(chuàng )建的七鑫易維,最初的時(shí)候他也沒(méi)想到自己會(huì )出來(lái)創(chuàng )業(yè)。
在沈陽(yáng)航空航天大學(xué)任職期間,黃通兵搗鼓了一些項目,然后無(wú)心插柳柳成蔭,他成功地將自己做的軟件賣(mài)給了一家軍工企業(yè)。
(七鑫易維創(chuàng )始人&CEO黃通兵)
而黃通兵最先研究的是偏戰斗機飛行器相關(guān)的眼控技術(shù),“當時(shí)眼球追蹤是飛行員軍用瞄準頭盔上一個(gè)在研的技術(shù)。”
卸下老師的身份后,黃通兵在工作上也遇到不少坑,但也正是那些路上的荊棘,有了今天的七鑫易維。
“其實(shí)公司成立之初,就是從這種穿戴式的頭顯出發(fā),當時(shí)主要用于醫療輔具上,后來(lái)包括普通的臺式一體機這些”,七鑫易維創(chuàng )建后不久,他們就成功地把眼控儀銷(xiāo)售給ALS人群(漸凍人),并且與相關(guān)的殘疾人協(xié)會(huì )進(jìn)行合作。
而隨著(zhù)近幾年VR/AR突然竄頭,眼球追蹤技術(shù)也看到走向消費級應用的曙光,七鑫易維自然不會(huì )錯過(guò)這次機會(huì )。所以他們也順勢推出了首款VR眼球追蹤模組aGlass。
(全球首款VR眼球追蹤模組aGlass)
但是將這個(gè)有點(diǎn)黑科技概念的技術(shù)做到一個(gè)消費級水平并不是容易的事情,這也是為什么行業(yè)內會(huì )連續出現大公司收購技術(shù)創(chuàng )企的新聞:
2017年6月,蘋(píng)果收購了專(zhuān)注于眼球追蹤技術(shù)的德國公司SensoMotoric Instruments;
2016年12月,Facebook收購了眼球追蹤公司The Eye Tribe;
2016年10月,谷歌收購了眼球追蹤技術(shù)公司Eyefluence。
科技巨頭們在收購的同時(shí),與眼球追蹤相關(guān)的一系列專(zhuān)利也悉數收入囊中,由此可見(jiàn)眼球追蹤的技術(shù)門(mén)檻也非常高。
當問(wèn)到七鑫易維之后會(huì )不會(huì )委身于大公司,黃通兵打了個(gè)‘馬虎眼’,“行業(yè)內的公司既有被收購的,也有自己獨立上市的,所以一切皆有可能吧。”
千人有千眼,先從基礎的數據采集開(kāi)始
眼球追蹤技術(shù)的門(mén)檻高,直到現在技術(shù)本身也沒(méi)有一個(gè)完整的解決方案,而眼球的數學(xué)模型目前也不完備。
如黃通兵所說(shuō),“千人有千眼,每個(gè)人的眼睛都是獨一無(wú)二的,有的眼睛斜視,有的眼睛近視或者遠視,甚至還有一些眼部的疾病。同時(shí)戴眼鏡的情況也特別多。在這種情況下,要做全眼球相關(guān)的數據也是一個(gè)難度大,且需要長(cháng)期積累的事情。”
以數據采集為例,七鑫易維最初將眼球追蹤技術(shù)應用到醫療領(lǐng)域的時(shí)候,就已經(jīng)有計劃地采集一些數據,尤其是比較特殊的一些眼球方面,“這么多年,我們一直在積累這方面的數據。”
當然,這也是七鑫易維和其他競爭對手相比所保有的優(yōu)勢。
從2014年到2016年,七鑫易維相繼得到高通、中興合創(chuàng )、國科等知名機構的投資,所以在芯片以及核心傳感器方面,他們都會(huì )有全面的資源和國際巨頭公司的背書(shū)。
基于此,七鑫易維的眼球追蹤模組aGlass的DK1版本很快得到HTC Vive的官方認可,“作為首款眼球追蹤配件,我們推出市場(chǎng)后更多的是起到教育市場(chǎng)和培育開(kāi)發(fā)者的作用。”黃通兵介紹,他們正在準備DK2的版本。相比較之前主要面向開(kāi)發(fā)者的版本,新的追蹤模組推出的同時(shí)會(huì )附帶相關(guān)的內容體驗,包括一些基于眼動(dòng)數據的個(gè)性化服務(wù)。
其實(shí)從鎂客君的體驗來(lái)看,很少能看到帶有眼球追蹤的VR內容,黃通兵也是心有戚戚,“內容體驗方面目前還沒(méi)有特別面向大眾的應用推出,推出眼球追蹤模塊也是為了讓開(kāi)發(fā)者更快熟悉技術(shù),只有不斷出現新的內容支持眼球追蹤技術(shù),才可能讓消費者真正去接受并且把這個(gè)東西玩起來(lái)。”
等待眼球追蹤技術(shù)來(lái)改寫(xiě)更自然的人機交互
雖然現階段用眼球追蹤交互的內容還比較少,但不可否認眼球追蹤帶來(lái)的是更加自然的人機交互體驗,從這個(gè)角度來(lái)看,它非常適合于一些VR場(chǎng)景。
(眼控交互)
“在現有的一些VR游戲中,瞄準都是一個(gè)大難題,你得拿著(zhù)方向鍵或者晃頭,這些都沒(méi)有只用眼球直接瞄準來(lái)的爽。”黃通兵認為,對于VR/AR來(lái)說(shuō),眼球追蹤是最好的人機交互之一,而且相比語(yǔ)音、手勢識別以及帶有外設的其他交互方式,它也更加適合穿戴式的環(huán)境。
黃通兵說(shuō)了幾個(gè)實(shí)際應用的例子:比如體驗一些VR游戲,眼睛看著(zhù)目標就可以鎖定,而在一些驚悚類(lèi)的游戲中,可以設計出這樣一種機制,當出現恐怖情節的時(shí)候,玩家閉上眼不敢看,就會(huì )觸發(fā)掉血的機制。
問(wèn)題來(lái)了,如果僅僅依靠眼球的運動(dòng)來(lái)完成所有的交互,造成視覺(jué)疲勞會(huì )怎么辦?
黃通兵表示,基于眼球追蹤的交互更多是一種“弱交互”,它不是讓玩家一直“拼命”地盯著(zhù)目標物體。“我們把眼球追蹤定義成用戶(hù)在潛意識中就可以進(jìn)行的操作,我們會(huì )在后臺分析大量的眼動(dòng)數據,當觸發(fā)相應的操作,其實(shí)他們并不一定可以察覺(jué)到。而且在具體的應用中,眼球追蹤只是起瞄準作用,射擊之類(lèi)的操作還是要通過(guò)手柄來(lái)完成。”
(注視點(diǎn)渲染技術(shù))
眼球追蹤技術(shù)之于VR,不僅僅交互方式上的創(chuàng )新,其中涉及到的注視點(diǎn)渲染技術(shù),也能從底層去減少GPU資源的消耗。黃通兵介紹,“通過(guò)注視點(diǎn)渲染技術(shù),我們直接把渲染量減少,在提升性能的同時(shí),減少GPU的載荷。以VRFunhouse為例,本來(lái)需要雙1080顯卡才能流暢運行的場(chǎng)景,應用注視點(diǎn)渲染技術(shù)后,使用單1070顯卡就可以讓場(chǎng)景流暢運行,渲染幀率從45幀左右提升到將近90幀,延遲則由23ms左右降低到11ms左右。這樣的表現在GTC大會(huì )上也得到了NVIDIA CEO黃仁勛的肯定與支持”
從整個(gè)行業(yè)來(lái)看,眼球追蹤技術(shù)還處在一個(gè)成長(cháng)期,相比較手勢識別這些交互方式,發(fā)展的步伐可能會(huì )稍慢一些。黃通兵深諳此理,所以七鑫易維的下一步計劃是將眼球追蹤技術(shù)推廣到消費級的VR/AR設備上,鼓勵開(kāi)發(fā)者圍繞它做出更多的應用,從而推動(dòng)眼球追蹤技術(shù)地不斷成熟。
結語(yǔ):
在鎂客君采訪(fǎng)的諸多技術(shù)創(chuàng )企中,七鑫易維的眼球追蹤技術(shù)應該是離消費者最遠的VR/AR技術(shù)之一,所以它的發(fā)展以及成長(cháng)空間非常大。但是另一方面,我們也看到隨著(zhù)VR這樣新興產(chǎn)業(yè)的到來(lái),也正在讓更多黑科技一點(diǎn)點(diǎn)揭開(kāi)神秘的面紗,朝著(zhù)平民化、消費級方向發(fā)展。
當然,技術(shù)的推廣和應用也需要找到一個(gè)合適的場(chǎng)景,然后不斷去磨合。關(guān)于這個(gè)問(wèn)題在鎂客網(wǎng)9月8日協(xié)辦的虛擬現實(shí)發(fā)展大會(huì )上也會(huì )深入地探討,感興趣的不妨來(lái)現場(chǎng)聽(tīng)聽(tīng)像七鑫易維這樣的技術(shù)創(chuàng )企現身說(shuō)法。
【鎂客·請講】專(zhuān)注于報道科技創(chuàng )新項目;我們敞開(kāi)心扉面對每一位創(chuàng )業(yè)者,力求為您呈現一群鮮活、有性格的品牌和人物;我們傾聽(tīng)創(chuàng )業(yè)故事和人生經(jīng)歷、探討商業(yè)模式和行業(yè)趨勢、對接資本市場(chǎng)和供需雙方,以期為產(chǎn)業(yè)發(fā)展注入新的活力。
歡迎做客【鎂客·請講】,欄目合作請發(fā)送郵件至:post@im2maker.com
最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!
硬科技產(chǎn)業(yè)媒體
關(guān)注技術(shù)驅動(dòng)創(chuàng )新
