0
去年十月,蘋果推出了配有LiDAR(激光雷達)的iPhone 12 Pro,首次將dToF技術用到手機設備中,通過激光觸及物體后反射回來所用的時間繪制出使用者所處空間的深度圖,同時在也能讓AR效果更加逼真,打通真實與虛擬的交接,置身于室內就能感受逼真的雨林。

這不是ToF技術與移動設備的第一次結合,蘋果在去年3月份發(fā)布的iPad Pro中就已經用到ToF技術,國內也有不少手機廠商讓ToF上手機,為此還有著名的小米榮耀ToF之爭。
需要注意的是,雖然同為ToF,但國內幾乎所有的旗艦手機采用的是iToF,還未用上iPhone 12 Pro所采用的dToF技術。
不過,在今年的MWC大會的最后一天,高性能傳感器解決方案供應商艾邁斯半導體與ArcSoft合作,發(fā)布了針對移動設備后置3D dToF傳感的整套解決方案,有望在2021年底讓安卓手機后置也裝上dToF傳感器。
dToF帶來更加沉浸式AR體驗
一般而言, 3D成像傳感技術可以分為雙目測距、結構光和ToF三類,三類技術因各自的特點適用于不同的場景。
雙目測距模仿人眼,將兩個2D的傳感器組合在一起,利用相似三角形原理計算出被攝物體到相機的距離,原理簡單但在實際使用中面臨著計算量大的問題,其測量精度會隨著測量距離的增加而下降,因此適用于中近距離的場景。
雙目測距計算量大的問題可以采用算法加ASIC芯片的方法解決,但會增加額外的硬件成本,因此就有了升級優(yōu)化的主動雙目視覺技術——結構光方案。
結構光方案是將已知的結構化圖案投影到被觀測的物體上,再根據投影結構化圖案的幾何形狀和拍攝距離發(fā)生形變,紅外攝像頭觀測到圖像與原始圖案的形變時,就能得到圖案像素的視差計算深度。
此前iPhone X的前置攝像頭就采用了結構光技術,通過紅外光將大約3萬個點陣投射到物體上,用數量龐大的點陣得到深度信息,精度高但同樣是有效距離有限,有時也面臨深度突變數據缺失的情況,因此更適合手機前攝的刷臉支付。
如果說雙目和結構光適用于距離較近的場景,那么ToF方案則適用于中遠距離的場景。
艾邁斯半導體3D產品線高級市場經理Sarah Cheng表示:“dToF的精度取決于其TDC采樣的時間,相比于雙目和結構光方案,在精度上不會隨著距離的增長而顯著降低,所以ToF技術在不同距離的誤差相對雙目技術和結構光技術更加穩(wěn)定,在遠距離也有更好的精度?!?/strong>
這意味著在三種3D傳感技術中,dToF技術最適合用在手機后置。

后置3D用例
不過,ToF技術也分為iToF和dToF。其中iToF通過發(fā)射特定頻率的調制光,檢測反射調制光與發(fā)射調制光之間的相位差,進而測量飛行距離。dToF則是直接向測量物體發(fā)射一個光脈沖,然后測量反射光脈沖與發(fā)射光脈沖之間的時間間隔,獲得飛行時間,進而得知待測物體的深度。哪一種技術更加貼近未來智能手機的發(fā)展?
艾邁斯半導體高級副總裁陳平路認為,所有人工智能的演進都有離不開數據的采集與傳輸,都離不開傳感器,5G、AR/VR都是大方向。也就是說,作為體量最大的智能設備之一,未來的智能手機需要支持更加沉浸的AR/VR技術。

dToF與iToF特性對比
Sarah Cheng表示,支持更加沉浸手機AR體驗的3D技術需要滿足三點:
首先需要高質量的深度圖。在有用的距離和環(huán)境光范圍內提供高精度、低噪聲、高可信度的深度信息是沉浸式AR的基礎。
其次低功耗運行對手機應用尤為重要,在保證連續(xù)操作的同時需要確保正常的電池運行時間。
再次需要穩(wěn)定的幀屏以便3D攝像頭與其他相機的圖像融合,同時減少空間重建的時間。
Sarah Cheng另外指出,為減少或避免重建過高的時間和功耗,日常所用到的分辨率并不需要特別高,而低分辨率的弱勢也可以通過幀累積的方式進行補償。
比較iToF和dToF,iToF在實際應用中面臨諸多挑戰(zhàn),例如復雜多變的真實環(huán)境帶來大量的干擾與噪聲、復雜環(huán)境中的漫反射甚至鏡面反射帶來的多徑干擾嚴重影響3D重建的效果、以及iToF的遠距離與高精度采用泛光反射的原理下成為一對難以調和的矛盾。
反觀dToF,無論是精度距離還是功耗和抗干擾能力,都明顯優(yōu)于iToF,另外在其并不占優(yōu)勢的分辨率上,并不是實現更加沉浸式AR的關鍵。
因此,在目前已有的幾種3D視覺技術中,dToF更能帶來沉浸式的手機AR體驗。
艾邁斯半導體打響安卓陣營dToF第一槍
既然dToF是更好的選擇,為何大多數安卓手機還停留在iToF上甚至棄用ToF技術?
Sarah Cheng認為,ToF本身的成本壓力以及原本的iToF帶給用戶有限的效益,降低了市場對ToF技術的接受度,因此才有不少手機廠商商用ToF之后又棄用。
Sarah Cheng還指出,dToF的技術成熟面臨著一系列的挑戰(zhàn),它需要在芯片設計、系統(tǒng)設計、制造工藝等方面全面突破,才能正在實現技術承諾的優(yōu)勢,并實現在消費場景的普及,也正因如此,至今仍然沒有安卓手機廠商可以在其手機平臺上搭載3D dToF技術。
艾邁斯半導體大中華區(qū)應用總監(jiān)徐冰認為,大多數安卓手機不選用dToF的另一個重要原因是dToF的門檻高,可供手機廠商選擇的方案少,因此不如不用。
不過,這一現狀正在悄然發(fā)生變化。
在今年MWC大會的最后一天,艾邁斯半導體憑借其獨有的在各個構件模塊的差異化技術,從光學器件到VCSEL再到自主封裝、人眼安全,以及其自主系統(tǒng)設計和算法,推出了自主研發(fā)的完整的3D dToF解決方案。
艾邁斯半導體官方表示,這套方案為手機廠商掃除其面臨的一系列技術挑戰(zhàn),可以在最短的時間內推出最優(yōu)秀的3D技術手機,手機制造商在開發(fā)新的移動應用的同時,也可以提供更優(yōu)化的AR用戶體驗。

艾邁斯半導體dToF解決方案圖案投影
根據艾邁斯半導體的介紹,其dToF解決方案差異化優(yōu)勢明顯,主要體現在三方面:
在所有光強條件下(強光,弱光,室內,室外,較復雜的環(huán)境光等),在恒定分辨率下可實現較大的距離檢測范圍和較高的(不變的)距離檢測精度;
高環(huán)境光抗擾性,其峰值功率高出市面上已有的3D ToF解決方案20多倍,在強光下也有能保持高精度和高性能;
針對移動設備優(yōu)化最低平均功耗。
在發(fā)布會上,艾邁斯半導體展示了其dToF應用系統(tǒng)搭載虹軟中間件和軟件算法的樣品,從視頻中能夠看到,這套應用系統(tǒng)在3D渲染時速度比iToF更快且覆蓋范圍更廣,遇到墻面時網格深度信息的精度更高,在細節(jié)處理方面誤差小。


ams dToF解決方案比iToF渲染范圍更廣
Sarah Cheng 表示:“艾邁斯半導體作為市面上現有的唯一的dToF全套系統(tǒng)供應商,其完整的3D dToF技術堆棧可以最大限度地降低手機廠商集成的復雜度和工作量,同時達到系統(tǒng)最優(yōu)化。同時跟系統(tǒng)在靈敏度、功耗、功率和分辨率上都優(yōu)于市面上同類技術?!?/strong>

艾邁斯半導體dToF解決方案3D渲染效果
安卓手機有望在2021年底裝上dToF
艾邁斯半導體在發(fā)布會上表示,在產品逐漸走向量產化的同時,艾邁斯半導體也正在與成熟生態(tài)系統(tǒng)廠商協(xié)作,包括與基于高通平臺的安卓開發(fā)商以及國內知名商虹軟科技合作,提供最佳AR體驗的dToF解決方案,計劃于2021年底開始投產,數量接近百萬級別。
而隨著dToF解決方案的投產,VCSEL效率或者SPAD效率的提高,dToF的價格將逐漸向iToF靠近,這就意味安卓手機有望在2021年底用上dToF,從攝像頭方面追趕iPhone,提升其在遠距離、精度以及低功耗方面的實力。
不過,dToF技術在安卓手機上的大規(guī)模應用仍需一段時間的市場檢驗,也許安卓手機傳感器先追趕上iPhone,又或者是iPhone再次先一步在dToF技術上取得創(chuàng)新。
文中圖片源自艾邁斯半導體官方
雷鋒網雷鋒網雷鋒網
雷峰網原創(chuàng)文章,未經授權禁止轉載。詳情見轉載須知。