“人形”機(jī)器人安裝精準(zhǔn)的視覺(jué)系統(tǒng),可以具有與孫悟空相媲美的“火眼金睛”,能夠更清晰更準(zhǔn)確的在復(fù)雜環(huán)境中辨識(shí)物體,甚至在夜晚黑暗的環(huán)境中也可以感知到物體的形狀。當(dāng)然,除了視覺(jué)系統(tǒng),一個(gè)優(yōu)秀的“人形”機(jī)器人還需要配備良好的聽(tīng)覺(jué)系統(tǒng)以及運(yùn)動(dòng)和感知能力,使其像人類一樣靈活聰明,幫助我們解決實(shí)際問(wèn)題。
現(xiàn)在大多數(shù)機(jī)器人所采用的是雙目視覺(jué)系統(tǒng),利用2個(gè)攝像頭構(gòu)成景深相機(jī),來(lái)判斷所看到的物體離機(jī)器人的距離以及它的形態(tài)等等。
雙目成像利用雙攝像頭拍攝物體,再通過(guò)三角測(cè)距原理計(jì)算物體距離。它可以測(cè)量目標(biāo)物體的深度信息以達(dá)到高精確度、高分辨率的測(cè)量結(jié)果。但是這種系統(tǒng)效率低、算力要求高、容易受到環(huán)境因素干擾,尤其在光線不充足的昏暗環(huán)境下識(shí)別率很差。另外,雙目成像相機(jī)所采集的視頻圖像,需要經(jīng)過(guò)一些上層軟件人工智能的算法處理,這對(duì)于系統(tǒng)硬件設(shè)計(jì)中對(duì)中央處理器CPU和圖像處理器GPU的要求非常高,開(kāi)發(fā)難度也相對(duì)較大。因此,雙目成像在實(shí)際使用中面臨諸多問(wèn)題。
通過(guò)結(jié)合使用光飛行時(shí)間三維攝像頭傳感器(TOF 3D Camera)和遠(yuǎn)紅外熱傳感器陣列傳感器(Thermal camera FIR array),我們打造出更為高效的機(jī)器人視覺(jué)系統(tǒng)。飛行時(shí)間三維攝像頭提供傳感器芯片和配套接口芯片,能夠?qū)崿F(xiàn)可靠的3D成像解決方案,同時(shí)可最大限度降低后期處理成本,兼具靈活可調(diào)的各種功能來(lái)應(yīng)對(duì)不同的分辨率、距離和視野要求。遠(yuǎn)紅外熱傳感器陣列則是在單一芯片中集成了一系列熱感應(yīng)像素陣列,通過(guò)像素?zé)彡嚵锌梢詫?shí)現(xiàn)在二維區(qū)域內(nèi)的溫度檢測(cè),它為較昂貴的高端熱成像儀提供了一種經(jīng)濟(jì)高效的替代方案。
飛行時(shí)間(TOF)三維攝像頭傳感器
TOF英文全名為Time of Flight,指的是光飛行時(shí)間。攝像頭的調(diào)制光源光線發(fā)射出去之后,經(jīng)過(guò)物體再反射回來(lái),會(huì)有一個(gè)時(shí)間差,根據(jù)這個(gè)時(shí)間差,經(jīng)過(guò)具體的算法,可以估算出物體離攝像頭的距離。
如圖所示,TOF 3D攝像頭大大提高了圖像景深信息,可以分析出前面的立體圖像,準(zhǔn)確的識(shí)別物體之間的距離,從而在復(fù)雜環(huán)境下實(shí)現(xiàn)高精度地機(jī)器人躲避障礙,路線規(guī)劃等功能。
光飛行時(shí)間三維攝像頭傳感器(TOF 3D Camera)可以構(gòu)建一個(gè)3D深度攝像頭,攝像頭大大提高了圖像景深信息,可以分析出前面的立體圖像,準(zhǔn)確的識(shí)別物體之間的距離。搭載TOF 3D攝像頭的機(jī)器人能夠?qū)η胺綀D像進(jìn)行三維建模,從而在復(fù)雜環(huán)境實(shí)現(xiàn)高精度地機(jī)器人躲避障礙,路線規(guī)劃等功能。此外,這種3D深度攝像頭還可以實(shí)現(xiàn)人臉識(shí)別、手勢(shì)識(shí)別、人體骨架識(shí)別、三維測(cè)量、環(huán)境感知、三維地圖重建等多項(xiàng)功能,可廣泛運(yùn)用于電視、手機(jī)、機(jī)器人、無(wú)人機(jī)、VR/AR、智能家居安防、汽車駕駛輔助等領(lǐng)域。
邁來(lái)芯提供以MLX75023 3D攝像頭傳感器為核心的成套芯片組解決方案,通過(guò)與 MLX75123 配套接口芯片的搭配可提供完整的飛行時(shí)間解決方案。
MLX75023 是一款三分之一英尺大小的芯片,集成了四分之一視頻圖形陣列(QVGA,320 x 240 像素)分辨率的光飛行時(shí)間 (TOF) 攝像頭傳感器。其高動(dòng)態(tài)范圍DepthSense?TOF 像素技術(shù)可提供支持最高 120 klux 的背景光抑制能力。它具有-40℃至+105℃的工作溫度范圍,采用芯片級(jí)玻璃球形陣列 (BGA) 封裝,可提供許多集成功能。MLX75123芯片兼具出眾性能與靈活性,可以最小化元器件數(shù)量并減小三維TOF攝像頭的尺寸,從而簡(jiǎn)化設(shè)計(jì)并實(shí)現(xiàn)超緊湊型3D攝像頭。
MLX75023和MLX75123芯片具有極小的封裝封裝尺寸,因此它們所需的電路板面積極小。該芯片組優(yōu)異的工作穩(wěn)定性使其非常適合于針對(duì)汽車、監(jiān)控和智能建筑的設(shè)計(jì)以及包括機(jī)器視覺(jué)、機(jī)器人和工廠自動(dòng)化在內(nèi)的工業(yè)應(yīng)用。
此外,我們還設(shè)計(jì)研發(fā)了一系列創(chuàng)新性產(chǎn)品用于構(gòu)建適合機(jī)器人應(yīng)用的傳感器和驅(qū)動(dòng)控制器解決方案,包括用于檢測(cè)電流的Hall電流傳感器 MLX91210;冷卻CPU的風(fēng)扇驅(qū)動(dòng)IC MLX90287;多款適用于馬達(dá)位置和角度檢測(cè)的Latch/Switch、線性和3D Hall位置傳感器等。
-
傳感器
+關(guān)注
關(guān)注
2548文章
50667瀏覽量
751948 -
TOF
+關(guān)注
關(guān)注
9文章
476瀏覽量
36270
原文標(biāo)題:“人形”機(jī)器人視覺(jué)系統(tǒng)方案詳解
文章出處:【微信號(hào):eetop-1,微信公眾號(hào):EETOP】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論