ToF相機
最近,ToF相機已經成為很多旗艦智能手機不可或缺的一部分。它是如何工作的?有哪些技術優勢?最適合哪些應用?市場上又有哪些產品可供選擇呢?帶著這些問題,今天我們就來一起探究一下。
什么是ToF?
在回答上述問題之前,我們先來回顧一下大家非常熟悉的聲納探測器。根據百度百科的描述,聲納探測器是一種利用聲波在水下的傳播特性,通過電聲轉換和信息處理,完成水下探測和通信任務的電子設備。它主要利用水中聲波對水下的目標進行探測、定位和通信。
ToF是飛行時間(Time of Flight)的縮寫,ToF傳感器的工作原理與聲納探測非常相似,它是通過測量光從物體上反射所需的時間來進行物體的定位和通信。ToF傳感器采用的是紅外光,當光從物體上反射回傳感器后,根據光的發射與反射的時間差,就可以計算出傳感器與測量物體之間的距離。很多時候,ToF傳感器也被稱為“深度相機”(depth camera)或者ToF相機。
ToF傳感器本身由兩部分組成:第一部分是發射紅外光的二極管,第二部分是特殊的光敏矩陣。傳感器測量從物體反射回來的時間可以精確到納秒級。此外,ToF傳感器還有一個重要特性使其成為一個3D傳感器。
那是因為ToF傳感器不僅可以準確計算單個物體與傳感器的距離,利用激光返回時間和波長的差異,還能對目標進行精確的數字三維(3D)表征,并直觀地繪制出目標的各個特征,為我們提供一個三3D圖像。
現在,ToF傳感器已經出現在許多高端智能手機中,如三星、華為、OPPO RX17 Pro、Honor等。在自動駕駛汽車甚至美國宇航局建造的太空探測器中,都使用了ToF傳感器。
ToF技術的優勢和不足
任何一項技術都會有其獨特的優勢,當然也會存在一些不足,ToF同樣不會例外。下面我們先來看一下ToF的優點。
低功耗:ToF技術僅使用一個紅外光光源就可以直接測量每個像素中的深度和幅度信息。也就是說,在一個實際場景中,通過發射光和接收光之間測量到的相位差以及幅度值可以得到高度可靠的距離信息以及完整場景的灰度圖像。
在這個過程中,ToF可以將功耗保持在很低的水平,并能提供用于實時操作的快速數據采集。此外,ToF所需的深度數據處理比結構光或立體視覺等其它算法密集型深度感測技術要求低,因此在應用處理器上還可以節省額外的功率。
小尺寸:ToF技術的固有優勢在于其攝像頭模塊簡單而穩健,它僅由兩個關鍵部件組成:成像器和單個閃光照明組件。因此,它的攝像頭模塊非常小,適用于空間要求苛刻的應用,比如智能手機,可輕松實現穩定的批量生產。
精確快速的測量:與超聲波或激光等其他距離傳感器相比,ToF傳感器能夠快速合成場景的3D圖像。不僅如此,ToF傳感器還能在短時間內準確地探測到物體,并且不受濕度、氣壓和溫度的影響。
遠距離測量:由于ToF傳感器使用的是激光,它們能夠以極高的精度測量較遠的距離。因此,ToF傳感器能夠靈活地檢測到各種形狀和大小的遠近物體。
安全性高:可能很多人會擔心ToF傳感器發出的激光會傷害到眼睛。其實大可不必擔心,因為許多ToF傳感器都采用低功率紅外激光,達到了1級激光安全標準。
成本效益高:與其他三維深度范圍掃描技術(如結構光相機系統或激光測距儀)相比,ToF傳感器相對要便宜得多。
盡管ToF有很多好處,但它也有其技術局限性。具體包括:
散射光帶來的偽影:如果被測物體表面特別明亮且非常靠近ToF傳感器,它們會將太多的光散射到接收器中,并產生偽影和不必要的反射。
多次反射帶來測量的不確定性:當在拐角和凹面上使用ToF傳感器時,光線可能會被多次反射,這些不必要的反射將給測量帶來很大的不確定性。
環境光對測量帶來不利影響:當在陽光明媚的戶外使用ToF傳感器時,高強度的陽光會導致傳感器像素的快速飽和,從而無法檢測到物體反射的實際光。
ToF與LiDar的對比
我們這里討論談論的ToF屬于光學測距,其實在這一領域還有一個重要產品——激光雷達(LiDar)。雖然都是使用光進行距離測定和三維測繪,ToF與LiDar到底有何不同?
激光雷達(LiDar)是激光探測和測距的縮寫,這項技術使用一個激光器作為光源。雖然激光雷達對移動設備來說可能是新技術,但這項技術本身已經存在相當長的一段時間了。在非移動環境中,激光雷達被用于繪制水下環境圖和發現考古遺址等工作。
從技術上講,LiDar和ToF傳感器的最主要區別在于:LiDar使用光脈沖來測量飛行時間,ToF傳感器則利用連續波從反射和相移得到飛行時間。與LiDar相比,ToF需要較少的專用設備,因此可以與更小、更便宜的設備一起使用。
嚴格地說,LiDar激光雷達比ToF的測量速度更快且更加精確,這在技術更先進的應用中是非常重要的。隨著技術的不斷拓展,ToF與LiDar的協同應用越來越多。
ToF傳感器的主要應用
作為一款能夠精確測量“深度”信息的傳感器,ToF傳感器的主要應用包括:
1 智能手機等消費電子
自2015年ToF傳感器首次應用在iPhone X前置攝像頭方案中,就迅速掀起了其在手機中應用的熱潮,之后其廣泛應用于手機的前置感測和后置輔助對焦等應用場景,僅在手機上年出貨量就超億顆,應用手機超過200款。
ToF與結構光、雙目視覺技術(Stereo Vision)共同組成了當前3D攝像頭的三條主流技術路線。預計到2024年,應用于智能手機的后置3D攝像頭市場規模將增長到每年5億多顆。
STMicroelectronics(ST)三合一智能光學模塊VL6180X是較早用于智能手機中的ToF產品,該芯片整合了接近傳感器、環境光傳感器以及VCSEL光源。接下來的5年里,ST陸續推出了VL6180X、VL53L0、VL53L1、VL53L3、VL53L5等四代ToF產品。
除手機外,ToF傳感器還廣泛應用在掃地機避障、投影儀輔助對焦、相機輔助對焦、智能燈具、智能衛浴如自動水龍頭、自動皂液器、智能馬桶、機器人、無人機等許多領域。
2 AR(增強現實)和VR(虛擬現實)
在AR/VR耳機中,ToF 3D相機能生成實時3D點云,使AR/VR軟件能夠更好地識別場景中任何感興趣對象的周圍環境。這種增強的功能允許更高精度的DSLR質量圖像效果用于對象定位,并促進場景的虛擬和實際元素之間更復雜和動態的交互。
另一方面,該系統具有檢測玩家動作的能力,不需要使用人機界面(HMI),就可以讓游戲通過手勢與虛擬元素進行密集的交互。
Infineon(英飛凌)攜手pmd最新推出的REAL3 ToF圖像傳感器芯片,微小的芯片被可以集成到小型化的攝像頭模組中,為AR應用提供各種距離的精確深度測量,同時為圖像傳感器節省40%以上的功耗。
這款REAL3 ToF傳感器能夠在各種距離、光照條件和使用場景下實現差異化的攝像頭性能,同時為移動設備延長電池的使用壽命。此外,REAL3 ToF傳感器還可以實現更平滑更具沉浸感的AR體驗,提供高質量的深度數據捕捉,最遠可達10米,且在短距離內不會丟失分辨率。
3 工業機器人
借助于環境的實時三維深度圖,機器人能夠更準確地識別物體及其移動范圍。通過手勢識別,機器人可以在協同應用中直接與人交互。在工業應用中,采用3D-ToF相機的機器人能更精確地對任何產品進行三維測量,并能高精度地抓取和放置產品。
ST不久前發布的VL53L5產品,是第一款能夠監測64個不同區域的ToF傳感器。它與VL53L1X相似,都具有相同的量程,并采用了940nm VCSEL。不過,VL53L5尺寸稍大一些,為6.4mm x 3mm x 1.5mm。但視野范圍擴大到61o(水平和垂直方向43o),而不是上一代的27o。
VL53L1X是2018年推出的ToF傳感器,可達到4米測距范圍,是當時市面上最小的ToF傳感器。相比2016年推出的VL53L0X測距范圍增加一倍。VL53LX的封裝尺寸為4.9mm x 2.5mm x 1.56mm,而VL53L0X的尺寸為4.4mm x 2.4mm x 1.0mm。
ST已經決定同時保留這兩種器件,以幫助設計師為產品選擇最合適的組件,那些不需要額外距離的人可以從更小、更實惠的解決方案中獲益,而確實需要更高性能的工程師可基于此前的開發方案,選擇新一代更強功能的ToF傳感器。
4 汽車
3D ToF相機在下一代汽車中具有巨大的應用潛力。該技術有助于車輛實時獲得良好的環境感知,實現快速機動和避障,這也是自主駕駛不可或缺的能力。3D ToF還可以用來監控駕駛員和乘客的狀態,并在緊急情況下接管車輛的控制。3D ToF相機的手勢檢測可用于設置室內氣候控制或切換到來電。
ADI公司開發的ToF模塊結合影像傳感器和VGA ToF傳感器模塊與內建圖像處理器方案,比傳統音波檢測具備更佳的檢測角度,也更能準確測量物體跟汽車的距離。因此可為汽車倒車系統、開門防護系統、停車輔助系統及盲點偵測等應用提供更大范圍的碰撞偵測預防。
作為ToF方案的核心器件之一,ADI的ToF前端芯片ADDI903x系列支持CCD紅外光ToF傳感器,分辨率可達640 x 480。ADDI903x可將影像信號轉換為數字信號,并提供高精確度的脈波時間控制器,閉回路設計,讓激光二極管控制的脈波寬度更準確,進而可以得到更精準的深度數據。
5 安全和監視
3D ToF相機能提供實際場景中物體的高分辨率3D深度映射。與傳統的2D成像相比,這是一個顯著的優勢,因為它提供了高度的可信度,可以根據精確的位置對人和物體進行分類。
ams擁有全球最小的集成式1D ToF距離測量和接近傳感模塊。這款傳感器非常適合實施存在監測,例如,當用戶臉部位于識別范圍內時,即可觸發人臉識別系統操作。最新款TMF8701傳感器采用2.2mm x 3.6mm x 1.0mm封裝,有助于智能手機制造商實現具有高顯示屏占比的寬屏手機設計。
TMF8701集成了VCSEL紅外發射器、多個SPAD(單光子雪崩光電二極管)光探測器、時間-數字轉換器和直方圖處理內核。設備在芯片上實現基于直方圖的全占位監測、距離測量和接近傳感算法。
TMF8701獨立識別顯示屏上的指紋污染以及蓋玻片范圍以外物體(例如用戶臉部)的光反射,即使在傳感器孔徑臟污時,也能保持可靠性能。在正常照明條件下測量距離為20~60cm范圍時,模塊實現了±5%準確度。即使在明亮太陽光(100klux)下,也可以在高達35cm的范圍內保持±5%準確度。
結語
有一點是肯定的,ToF有很大的市場潛力。根據Yole的預測,包括ToF技術在內的全球3D成像與傳感市場,將以20%的年均復合成長率從2019年的50億美元成長至2025年的150億美元。其中,攝像頭后置3D成像應用將超過前置,市場滲透率將在2025年接近42%。
事實上,智能手機可以成為一個超精密的距離測量設備或夜視儀,這也意味著人們再也不愿購買沒有ToF傳感器的手機了。雖然我們處在剛剛起步階段,未來,隨著ToF傳感器技術及多點測距的進一步發展,它將會被應用到更多的領域。
編輯:jq
-
傳感器
+關注
關注
2548文章
50693瀏覽量
752035 -
華為
+關注
關注
215文章
34310瀏覽量
251192 -
TOF
+關注
關注
9文章
478瀏覽量
36271
原文標題:ToF傳感器究竟有多神奇?本文告訴你!
文章出處:【微信號:NXP客棧,微信公眾號:NXP客棧】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論