把激光雷達(dá)放在iPad上是怎樣的體驗(yàn)?看到“測(cè)距儀”App的效果我震驚了
編者按:本文來(lái)自微信公眾號(hào)“量子位”(ID:QbitAI),作者:曉查,36氪經(jīng)授權(quán)發(fā)布。
就在今天早晨,蘋果發(fā)布了iOS/iPadOS 13.4更新,除了常規(guī)升級(jí),還有個(gè)看似不起眼的更新:加入了ARKit 3.5。
如果你關(guān)注過(guò)上周發(fā)布的iPad Pro,想必已經(jīng)能猜到,ARKit 3.5是就是為它的激光雷達(dá)準(zhǔn)備的。
從2017年開始,蘋果就開始大力推廣AR(增強(qiáng)現(xiàn)實(shí)),但只有發(fā)布會(huì)上的MineCraft等游戲展示令人印象深刻,之后鮮有廠商跟進(jìn)。曾經(jīng)開發(fā)AR眼鏡的Magic Leap也瀕臨“賣身”。
AR似乎遠(yuǎn)遠(yuǎn)看不到大范圍實(shí)際應(yīng)用的那一天,但是iPad Pro激光雷達(dá)的出現(xiàn)可能改變這一局面。
關(guān)于ARKit 3.5在今天更新的ARKit 3.5中,蘋果添加了一個(gè)新的“場(chǎng)景幾何”(Scene Geometry)API,允許開發(fā)者使用iPad Pro上激光雷達(dá)掃描儀創(chuàng)建房間的3D地圖,識(shí)別地板、墻壁、天花板、桌椅沙發(fā)等。
能夠在5米范圍內(nèi)精準(zhǔn)測(cè)量物體的長(zhǎng)寬高,感知到物體每個(gè)平面的方向,甚至還能發(fā)現(xiàn)物體之間的遮擋關(guān)系,讓嵌入在視頻的中數(shù)字內(nèi)容與場(chǎng)景更好地融合在一起。
這讓iOS自帶的測(cè)距儀App體驗(yàn)有了質(zhì)的飛躍。
之前的iPad和iPhone都是通過(guò)攝像頭的景深來(lái)感知物體的遠(yuǎn)近,實(shí)際上測(cè)距儀的照片中并不包含真正的3D信息。
用過(guò)測(cè)距儀的用戶都知道,比如我們?cè)跍y(cè)量桌子長(zhǎng)度的時(shí)候,測(cè)距儀的起點(diǎn)和終點(diǎn)很難精準(zhǔn)地放置在桌子邊緣上。這使得我們的測(cè)量準(zhǔn)確度大打折扣。
iPad Pro上測(cè)距儀App因?yàn)橛辛思す饫走_(dá)的存在,與其他蘋果設(shè)備有很大的不同。
而配備了激光雷達(dá)的iPad Pro當(dāng)它到達(dá)要測(cè)量的桌子等物體的末端時(shí),能夠自動(dòng)識(shí)別邊緣。
△圖片轉(zhuǎn)自魏布斯視頻
而且如果你走得更近,則會(huì)在屏幕上展示更多細(xì)節(jié),比如自動(dòng)顯示的新標(biāo)尺視圖。
數(shù)碼評(píng)測(cè)達(dá)人魏布斯在他的評(píng)測(cè)視頻中對(duì)iPad Pro的激光雷達(dá)有詳細(xì)的介紹:
盡管蘋果沒(méi)有特別提及,但激光雷達(dá)也將改善相機(jī)拍攝效果,今后在采用人像模式時(shí),背景虛化也會(huì)更加精準(zhǔn)。
iPad上的激光雷達(dá)激光雷達(dá)之前已經(jīng)廣泛用在自動(dòng)駕駛汽車上,用于物體的3D成像。蘋果的自動(dòng)駕駛秘密項(xiàng)目Titan Project也用過(guò)激光雷達(dá)。
蘋果在2017年發(fā)表的一篇研究論文詳細(xì)介紹了自動(dòng)駕駛汽車上的3D對(duì)象識(shí)別系統(tǒng)。該系統(tǒng)利用了激光雷達(dá)的深度圖,與神經(jīng)網(wǎng)絡(luò)結(jié)合起來(lái),大大提高了自動(dòng)駕駛汽車識(shí)別環(huán)境的能力。
如今蘋果的自動(dòng)駕駛汽車計(jì)劃已擱淺,但激光雷達(dá)卻被用在了移動(dòng)設(shè)備上。
那么iPad Pro上的這顆激光雷達(dá)有何特別之處呢?
iPad Pro上的這顆LiDAR本質(zhì)上是一顆飛行時(shí)間傳感器(ToF)。ToF現(xiàn)在被各大手機(jī)廠商用在相機(jī)的對(duì)焦上。
但蘋果使用的ToF與其他廠商不同,它是一顆真正根據(jù)飛行時(shí)間計(jì)算距離的傳感器dToF。
其他廠商都是根據(jù)相位差,利用發(fā)射光線和反射回的光線之間的相位干涉來(lái)判斷時(shí)間和距離。
而是更具發(fā)射光子反射回來(lái)的時(shí)間差來(lái)計(jì)算距離,這顆ToF能以納秒(十億分之一秒)速度運(yùn)行,精度更高、能耗更低。正是這個(gè)傳感器的出現(xiàn)讓AR應(yīng)用成為可能。
用iPad拍攝照片看起來(lái)相當(dāng)笨拙,但是今年的iPhone可能配備激光雷達(dá),如果蘋果的AR眼鏡計(jì)劃付諸實(shí)踐,那么未來(lái)的蘋果AR眼鏡也一定會(huì)有激光雷達(dá)相助。
令人高興的是,外媒AppleInsider爆料稱,iOS 14的代碼中顯示今年的iPhone會(huì)加入激光雷達(dá)。只是iPhone背后的三攝排列似乎沒(méi)有給激光雷達(dá)留下足夠的空間,難道iPhone的攝像頭布局還要改嗎?
參考鏈接
蘋果更新ARKit 3.5:https://venturebeat.com/2020/03/24/apple-releases-arkit-3-5-adding-scene-geometry-api-and-lidar-support/
魏布斯評(píng)測(cè)新版iPad Pro(感謝魏布斯授權(quán)轉(zhuǎn)載):https://mp.weixin.qq.com/s/_23UXcD4KogAZBlEAJbV-g
作者系網(wǎng)易新聞·網(wǎng)易號(hào)“各有態(tài)度”簽約作者