TikTok推出最新AR特效,iPhone 12 Pro的激光雷達終于有用了
最近TikTok上有一款AR特效十分火熱。 打開(kāi)特效后,會(huì )發(fā)現手機屏幕中央出現一顆正在倒計時(shí)的圓球。 當倒計時(shí)結束,這個(gè)球...
最近TikTok上有一款AR特效十分火熱。
打開(kāi)特效后,會(huì )發(fā)現手機屏幕中央出現一顆正在倒計時(shí)的圓球。
當倒計時(shí)結束,這個(gè)球便會(huì )爆炸,散開(kāi)的紙屑精準地掉落在沙發(fā)和地面,并展開(kāi)一個(gè)“2021”的字樣,一切都仿佛現實(shí)中發(fā)生一般。
基于激光雷達的AR特效
此前,TikTok就已經(jīng)內置了多款AR特效,這些特效大多基于相機(視覺(jué)傳感器)、IMU(慣性測量單元)和GPS傳感器生成。在大多數場(chǎng)景下,這些傳感器能提供不錯的定位精度,但用戶(hù)的沉浸感和場(chǎng)景交互依然欠缺。
從圖中來(lái)看,當虛擬物體呈現在現實(shí)中的物體上時(shí),并不能識別出物體的層次,導致缺乏真實(shí)的3D感,所以?xún)H憑這些傳感器是遠遠不夠的。
解決問(wèn)題的方法,就是增加新的傳感器。
例如iPhone 12 Pro上的LiDAR激光雷達,通過(guò)測距解決部分距離上的交互問(wèn)題,讓AR場(chǎng)景更富有層次感。這也是為何開(kāi)篇中紙片掉落如此真實(shí)的原因。
在TikTok之前,知名“閱后即焚”App——Snapchat就宣布成為第一款使用iPhone 12 Pro激光雷達技術(shù)的iOS應用。該公司程序員使用最新的LiDAR Scanner,在Snapchat中創(chuàng )建一個(gè)AR鏡頭,例如構建一片虛擬植被,在周?chē)姆块g里“種植”花草,讓墻壁“長(cháng)出”鮮花、讓“苔蘚”爬上櫥柜上……
得益于激光雷達的輔助,這些花草不再是簡(jiǎn)單地浮現在最上層,而是可以通過(guò)測距改變位置,更顯立體效果。
從前沿走向大眾
作為一項前沿技術(shù),激光雷達最早被普遍運用在自動(dòng)駕駛領(lǐng)域,簡(jiǎn)單來(lái)說(shuō),就是發(fā)射激光—測量返回時(shí)間—計算距離,從而讓自動(dòng)駕駛汽車(chē)感受到帶景深的環(huán)境信息。
在激光雷達的眼里:它看不到車(chē)、看不到路,但可以“摸”到好多點(diǎn),通過(guò)連續掃描,從而得到一幅連續完整的三維世界。
就是這么一項技術(shù),被蘋(píng)果帶到了智能手機、Pad領(lǐng)域。
去年3月18日,蘋(píng)果更新了雙攝版iPad Pro 2020,后置攝像模組中新增了LiDAR模塊。在官網(wǎng)的介紹里,蘋(píng)果展示了三個(gè)典型場(chǎng)景:量身高、AR游戲和宜家的AR家庭裝修。
平心而論,對普通用戶(hù)來(lái)說(shuō),LiDAR帶來(lái)的體驗提升幾乎感受不到,最能直觀(guān)感受到的就只有對焦速度的改善。
但在專(zhuān)業(yè)玩家手上,搭載了LiDAR的iPad Pro 2020充滿(mǎn)了創(chuàng )造力,上述三個(gè)場(chǎng)景僅是一小部分。
總結下來(lái),LiDAR主要可以用于三個(gè)部分:
1、提高AR應用表現:憑借激光雷達快速測距特性,讓設備快速進(jìn)入AR應用環(huán)境,減少等待時(shí)間;同時(shí)由于激光雷達更精準的測距表現,可以讓AR應用虛實(shí)結合更逼真,提供更良好的遮擋表現,這方面AR特效就是最好的例子;
2、優(yōu)化拍照和視頻效果:基于高精度測距,實(shí)現快速對焦,且成果逼近單反相機的大光圈虛化效果;
3、實(shí)現3D掃描功能:同樣基于高精度測距,可以完成細節更良好的3D掃描效果。
前兩項是與普通消費者最息息相關(guān)的方面,而最后一項則讓普通用戶(hù)也能體驗到工業(yè)級3D才擁有的功能。
以3D打印為例,以往3D掃描需要專(zhuān)業(yè)的系統相機陣列,即便是手持式的掃描儀也價(jià)格不菲。而當使用了LiDAR的產(chǎn)品后,3D掃描就成為很簡(jiǎn)單的一件事情。
布局未來(lái)AR生態(tài)
在蘋(píng)果的產(chǎn)品線(xiàn)中,頭戴式AR眼鏡是未來(lái)的重要產(chǎn)品線(xiàn)。但以目前的消費級AR硬件市場(chǎng)來(lái)看,除了Facebook與Google會(huì )給蘋(píng)果帶來(lái)壓力以外,AR眼鏡還是一個(gè)“歸于理想化”的產(chǎn)品,相比之下,用途更廣、用戶(hù)更廣的智能手機正是最好的AR設備。
蘋(píng)果AR部門(mén)主管Mike Rockwell曾表示:因為終端數量有限,打造原生VR/AR應用并非易事,與之對比的是,支持AR的蘋(píng)果iOS設備已經(jīng)達到了數億臺的規模,這是一個(gè)龐大的市場(chǎng)。
目前要做的,就是讓現有的移動(dòng)AR更加強大。
在iPhone 12系列發(fā)布當天,Snapchat就宣布成為第一款使用iPhone 12 Pro激光雷達技術(shù)的iOS應用。此后更多的應用開(kāi)始支持AR模式,這些內置LiDAR的設備,讓用戶(hù)從原本的體驗AR,轉到創(chuàng )作AR層面。
綜合而言,蘋(píng)果現階段的做法是:鼓勵開(kāi)發(fā)者將自己的應用加入AR功能,從而搭建一個(gè)豐富的AR生態(tài)。
據知名供應鏈網(wǎng)站Digitimes放出的消息稱(chēng),蘋(píng)果已與索尼簽訂一份為期三年的合約,確保在2023年前,提供可用于LiDAR感應器的技術(shù),以及具備高效率偵測近紅外線(xiàn)波段區域的光線(xiàn)穿透材料(Near-infrared,NIR)。
而iPhone 13全系列都將標配激光雷達掃描儀,這意味著(zhù)原本屬于高端機型才有的LiDAR,將下放到入門(mén)級的手機,讓每位購買(mǎi)iPhone 13的用戶(hù)都能體驗到豐富的AR內容。
正如我們所看到的,蘋(píng)果在這個(gè)領(lǐng)域的布局是深遠的,或許在2022-2023年,消費級AR眼鏡的浪潮就由蘋(píng)果引發(fā)。
最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!
硬科技產(chǎn)業(yè)媒體
關(guān)注技術(shù)驅動(dòng)創(chuàng )新
