資料介紹
1.1概述
汽車是現(xiàn)代社會(huì)最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現(xiàn),日益頻繁的交通堵塞和交通事故,嚴(yán)重影響到人們?nèi)粘I畹姆奖愫凸ぷ鞯男剩踔廖:Φ饺藗兊纳踩Q芯糠治霰砻鳎總€(gè)交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關(guān)的事故約占九成,駕駛員的人為失誤已經(jīng)被公認(rèn)為是交通事故的主要原因。如何減少“人”在交通系統(tǒng)中發(fā)揮的不確定因素,已經(jīng)成為汽車安全領(lǐng)域研究的重點(diǎn)。通過(guò)先進(jìn)的技術(shù)手段增強(qiáng)駕駛員感知能力,甚至替代部分駕駛?cè)蝿?wù),為車輛提供日益完善的安全預(yù)警和輔助駕駛功能,逐步實(shí)現(xiàn)車輛的智能化,并最終走向完全無(wú)人駕駛的智能車輛,必將是解決交通安全問(wèn)題的根本途徑。
隨著圖像處理和計(jì)算機(jī)視覺(jué)的快速發(fā)展,越來(lái)越多的先進(jìn)技術(shù)被應(yīng)用到汽車電子領(lǐng)域,傳統(tǒng)的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側(cè)和前方的視覺(jué)盲區(qū)無(wú)疑增加了安全駕駛的隱患。
我們具有自主知識(shí)產(chǎn)權(quán)的車載全景視覺(jué)技術(shù)是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進(jìn)行合成和投影,在人機(jī)界面虛擬一個(gè)單一的全景圖像,并且這個(gè)圖像時(shí)無(wú)盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時(shí),這個(gè)圖像經(jīng)過(guò)合成和投影,形成符合人的思維習(xí)慣的全景圖像。
1.2研究現(xiàn)狀
車載傳感器類型如表1所示,在這其中,全景視覺(jué)傳感器技術(shù)受到越來(lái)越多的關(guān)注,并成為車載電子裝置未來(lái)發(fā)展的主要方向。屬于視覺(jué)感知技術(shù)之一的全景視覺(jué)傳感器技術(shù)是智能感知交通環(huán)境重要的技術(shù)手段,它可以全方位、全天候、全時(shí)段地監(jiān)視、分析和記錄車內(nèi)外的情況,為報(bào)警系統(tǒng)、控制系統(tǒng)和安全避讓系統(tǒng)提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護(hù)提供了事前告之、過(guò)程記錄和事后重現(xiàn)的技術(shù)手段。特別是在復(fù)雜的道路環(huán)境下,通過(guò)全面的視覺(jué)技術(shù),可以使駕駛者的觀察得以延伸和擴(kuò)大,真正做到“眼觀六路”,掌控全局。
車載全景視覺(jué)傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺(jué)傳感器”,以及把拍攝的圖像傳送至計(jì)算機(jī)進(jìn)行處理的“處理用視覺(jué)傳感器”。 車載全景視覺(jué)傳感器今后的發(fā)展趨勢(shì)有如下幾個(gè)方面:
(1)處理用視覺(jué)傳感器的迅速普及;
(2)處理用視覺(jué)傳感器的多功能化;
(3)顯示用視覺(jué)傳感器和處理用視覺(jué)傳感器的融合。
表1:各種行駛傳感技術(shù)的比較
行駛傳感技術(shù)技術(shù)特點(diǎn)缺點(diǎn)探測(cè)范圍
超聲波成本低、探測(cè)精確。范圍小、受雨雪影響。《5m
脈沖雷達(dá)測(cè)量距離遠(yuǎn)、精確。波束窄,只適合前后盲區(qū)探測(cè)。》100m
多普勒雷達(dá)測(cè)量距離遠(yuǎn)、測(cè)量精確、可多天線矩陣配合使用。系統(tǒng)復(fù)雜、成本高。》100m
射頻標(biāo)識(shí)互相通知位置、成本低,系統(tǒng)可靠。必須為每個(gè)設(shè)備、人裝備發(fā)射標(biāo)識(shí),使用不方便。》100m
全景系統(tǒng)360度全景、直觀(非量化信息)有效性高、有良好的人機(jī)界面、便于再現(xiàn)重放。》100m
在BMW和NISSAN的高端車型上,已經(jīng)開(kāi)始使用多個(gè)攝像頭來(lái)輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經(jīng)開(kāi)始使用圖像識(shí)別技術(shù)來(lái)輔助駕駛?cè)藛T的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來(lái)進(jìn)行簡(jiǎn)單的自動(dòng)泊車的演示系統(tǒng)。
根據(jù)第三方的市場(chǎng)研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時(shí)約有 20% 的新車配備整合式攝影機(jī),而到了 2012 年時(shí)預(yù)計(jì)將增加到接近 70%,并且會(huì)有很大比例新車安裝至少2個(gè)以上攝像機(jī),車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺(jué)感知技術(shù)的汽車領(lǐng)域應(yīng)用比較
形態(tài)廠商功能技術(shù)含量備注
低端產(chǎn)品倒車后視鏡眾多小品牌后方視頻低產(chǎn)品成熟
中低端
產(chǎn)品倒車可視系統(tǒng)國(guó)內(nèi)的銀聲、
合正等后方視頻
雷達(dá)測(cè)距
GPS低產(chǎn)品成熟
中高端
產(chǎn)品倒車可視系統(tǒng)
車載多媒體常見(jiàn)于高端車型后方視頻(側(cè)方視頻)
多媒體功能
GPS低產(chǎn)品成熟
研發(fā)類
產(chǎn)品夜視和行人檢測(cè)豐田夜視攝像頭提供紅外圖像,通過(guò)紅外攝像頭頭實(shí)現(xiàn)行人,動(dòng)物檢測(cè)較高研發(fā)階段
可視全景系統(tǒng)日產(chǎn)汽車
松下電器
三洋電機(jī)多攝像頭實(shí)時(shí)視頻合成無(wú)盲區(qū)全景俯視圖高研發(fā)階段
主動(dòng)駕駛輔助系統(tǒng)富士重工通過(guò)雙目攝像頭主動(dòng)探測(cè)前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準(zhǔn)確性遠(yuǎn)遠(yuǎn)大于費(fèi)力地觀察若干儀表所能得到的信息量和信息準(zhǔn)確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預(yù)見(jiàn)在不遠(yuǎn)的將來(lái),基于全景視覺(jué)傳感器技術(shù)和圖像識(shí)別技術(shù)來(lái)實(shí)現(xiàn)輔助駕駛和安全功能的系統(tǒng)將廣泛應(yīng)用于各類車輛,進(jìn)而成為無(wú)人駕駛汽車和智能導(dǎo)航系統(tǒng)的關(guān)鍵技術(shù)。
本設(shè)計(jì)的最終目標(biāo)就是要給出基于FPGA技術(shù)來(lái)構(gòu)架SOC實(shí)現(xiàn)的以全景視覺(jué)處理為基礎(chǔ)的汽車環(huán)視系統(tǒng)。通過(guò)4路廣角攝像頭實(shí)時(shí)采集數(shù)據(jù),并將采集到的4路視頻數(shù)據(jù)進(jìn)行預(yù)處理和配準(zhǔn)拼接等一系列處理實(shí)現(xiàn)360度的實(shí)時(shí)全景視覺(jué)圖像,并通過(guò)VGA顯示器進(jìn)行顯示。
研究方法和技術(shù)路線
在系統(tǒng)構(gòu)成方面,系統(tǒng)主要分為三個(gè)部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過(guò)自行設(shè)計(jì)的視頻采集電路板接入圖像,并通過(guò)DMA將實(shí)時(shí)圖像數(shù)據(jù)搬到存儲(chǔ)器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點(diǎn)是采用更加高效的算法和設(shè)計(jì)思路,在目前有限的資源條件下,最大限度的利用資源以達(dá)到最佳的設(shè)計(jì)和顯示效果。
汽車是現(xiàn)代社會(huì)最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現(xiàn),日益頻繁的交通堵塞和交通事故,嚴(yán)重影響到人們?nèi)粘I畹姆奖愫凸ぷ鞯男剩踔廖:Φ饺藗兊纳踩Q芯糠治霰砻鳎總€(gè)交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關(guān)的事故約占九成,駕駛員的人為失誤已經(jīng)被公認(rèn)為是交通事故的主要原因。如何減少“人”在交通系統(tǒng)中發(fā)揮的不確定因素,已經(jīng)成為汽車安全領(lǐng)域研究的重點(diǎn)。通過(guò)先進(jìn)的技術(shù)手段增強(qiáng)駕駛員感知能力,甚至替代部分駕駛?cè)蝿?wù),為車輛提供日益完善的安全預(yù)警和輔助駕駛功能,逐步實(shí)現(xiàn)車輛的智能化,并最終走向完全無(wú)人駕駛的智能車輛,必將是解決交通安全問(wèn)題的根本途徑。
隨著圖像處理和計(jì)算機(jī)視覺(jué)的快速發(fā)展,越來(lái)越多的先進(jìn)技術(shù)被應(yīng)用到汽車電子領(lǐng)域,傳統(tǒng)的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側(cè)和前方的視覺(jué)盲區(qū)無(wú)疑增加了安全駕駛的隱患。
我們具有自主知識(shí)產(chǎn)權(quán)的車載全景視覺(jué)技術(shù)是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進(jìn)行合成和投影,在人機(jī)界面虛擬一個(gè)單一的全景圖像,并且這個(gè)圖像時(shí)無(wú)盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時(shí),這個(gè)圖像經(jīng)過(guò)合成和投影,形成符合人的思維習(xí)慣的全景圖像。
1.2研究現(xiàn)狀
車載傳感器類型如表1所示,在這其中,全景視覺(jué)傳感器技術(shù)受到越來(lái)越多的關(guān)注,并成為車載電子裝置未來(lái)發(fā)展的主要方向。屬于視覺(jué)感知技術(shù)之一的全景視覺(jué)傳感器技術(shù)是智能感知交通環(huán)境重要的技術(shù)手段,它可以全方位、全天候、全時(shí)段地監(jiān)視、分析和記錄車內(nèi)外的情況,為報(bào)警系統(tǒng)、控制系統(tǒng)和安全避讓系統(tǒng)提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護(hù)提供了事前告之、過(guò)程記錄和事后重現(xiàn)的技術(shù)手段。特別是在復(fù)雜的道路環(huán)境下,通過(guò)全面的視覺(jué)技術(shù),可以使駕駛者的觀察得以延伸和擴(kuò)大,真正做到“眼觀六路”,掌控全局。
車載全景視覺(jué)傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺(jué)傳感器”,以及把拍攝的圖像傳送至計(jì)算機(jī)進(jìn)行處理的“處理用視覺(jué)傳感器”。 車載全景視覺(jué)傳感器今后的發(fā)展趨勢(shì)有如下幾個(gè)方面:
(1)處理用視覺(jué)傳感器的迅速普及;
(2)處理用視覺(jué)傳感器的多功能化;
(3)顯示用視覺(jué)傳感器和處理用視覺(jué)傳感器的融合。
表1:各種行駛傳感技術(shù)的比較
行駛傳感技術(shù)技術(shù)特點(diǎn)缺點(diǎn)探測(cè)范圍
超聲波成本低、探測(cè)精確。范圍小、受雨雪影響。《5m
脈沖雷達(dá)測(cè)量距離遠(yuǎn)、精確。波束窄,只適合前后盲區(qū)探測(cè)。》100m
多普勒雷達(dá)測(cè)量距離遠(yuǎn)、測(cè)量精確、可多天線矩陣配合使用。系統(tǒng)復(fù)雜、成本高。》100m
射頻標(biāo)識(shí)互相通知位置、成本低,系統(tǒng)可靠。必須為每個(gè)設(shè)備、人裝備發(fā)射標(biāo)識(shí),使用不方便。》100m
全景系統(tǒng)360度全景、直觀(非量化信息)有效性高、有良好的人機(jī)界面、便于再現(xiàn)重放。》100m
在BMW和NISSAN的高端車型上,已經(jīng)開(kāi)始使用多個(gè)攝像頭來(lái)輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經(jīng)開(kāi)始使用圖像識(shí)別技術(shù)來(lái)輔助駕駛?cè)藛T的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來(lái)進(jìn)行簡(jiǎn)單的自動(dòng)泊車的演示系統(tǒng)。
根據(jù)第三方的市場(chǎng)研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時(shí)約有 20% 的新車配備整合式攝影機(jī),而到了 2012 年時(shí)預(yù)計(jì)將增加到接近 70%,并且會(huì)有很大比例新車安裝至少2個(gè)以上攝像機(jī),車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺(jué)感知技術(shù)的汽車領(lǐng)域應(yīng)用比較
形態(tài)廠商功能技術(shù)含量備注
低端產(chǎn)品倒車后視鏡眾多小品牌后方視頻低產(chǎn)品成熟
中低端
產(chǎn)品倒車可視系統(tǒng)國(guó)內(nèi)的銀聲、
合正等后方視頻
雷達(dá)測(cè)距
GPS低產(chǎn)品成熟
中高端
產(chǎn)品倒車可視系統(tǒng)
車載多媒體常見(jiàn)于高端車型后方視頻(側(cè)方視頻)
多媒體功能
GPS低產(chǎn)品成熟
研發(fā)類
產(chǎn)品夜視和行人檢測(cè)豐田夜視攝像頭提供紅外圖像,通過(guò)紅外攝像頭頭實(shí)現(xiàn)行人,動(dòng)物檢測(cè)較高研發(fā)階段
可視全景系統(tǒng)日產(chǎn)汽車
松下電器
三洋電機(jī)多攝像頭實(shí)時(shí)視頻合成無(wú)盲區(qū)全景俯視圖高研發(fā)階段
主動(dòng)駕駛輔助系統(tǒng)富士重工通過(guò)雙目攝像頭主動(dòng)探測(cè)前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準(zhǔn)確性遠(yuǎn)遠(yuǎn)大于費(fèi)力地觀察若干儀表所能得到的信息量和信息準(zhǔn)確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預(yù)見(jiàn)在不遠(yuǎn)的將來(lái),基于全景視覺(jué)傳感器技術(shù)和圖像識(shí)別技術(shù)來(lái)實(shí)現(xiàn)輔助駕駛和安全功能的系統(tǒng)將廣泛應(yīng)用于各類車輛,進(jìn)而成為無(wú)人駕駛汽車和智能導(dǎo)航系統(tǒng)的關(guān)鍵技術(shù)。
本設(shè)計(jì)的最終目標(biāo)就是要給出基于FPGA技術(shù)來(lái)構(gòu)架SOC實(shí)現(xiàn)的以全景視覺(jué)處理為基礎(chǔ)的汽車環(huán)視系統(tǒng)。通過(guò)4路廣角攝像頭實(shí)時(shí)采集數(shù)據(jù),并將采集到的4路視頻數(shù)據(jù)進(jìn)行預(yù)處理和配準(zhǔn)拼接等一系列處理實(shí)現(xiàn)360度的實(shí)時(shí)全景視覺(jué)圖像,并通過(guò)VGA顯示器進(jìn)行顯示。
研究方法和技術(shù)路線
在系統(tǒng)構(gòu)成方面,系統(tǒng)主要分為三個(gè)部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過(guò)自行設(shè)計(jì)的視頻采集電路板接入圖像,并通過(guò)DMA將實(shí)時(shí)圖像數(shù)據(jù)搬到存儲(chǔ)器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點(diǎn)是采用更加高效的算法和設(shè)計(jì)思路,在目前有限的資源條件下,最大限度的利用資源以達(dá)到最佳的設(shè)計(jì)和顯示效果。
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 360全景環(huán)視系統(tǒng) 6次下載
- 360全景環(huán)視原理說(shuō)明
- 360全景環(huán)視發(fā)展歷程
- 松下CMOS圖像傳感器MN34229PL使用手冊(cè) 70次下載
- 東芝CCD線性圖像傳感器TCD1702C數(shù)據(jù)手冊(cè) 15次下載
- 壓力傳感器和速度傳感器在汽車系統(tǒng)中的應(yīng)用及趨勢(shì) 35次下載
- 如何實(shí)現(xiàn)脈沖陣列式圖像傳感器成像系統(tǒng)的設(shè)計(jì) 34次下載
- CMOS圖像傳感器的原理參數(shù)和CCD圖像傳感器有什么區(qū)別等資料概述 59次下載
- 汽車環(huán)視系統(tǒng)設(shè)計(jì)完整硬件平臺(tái)設(shè)計(jì)方案 19次下載
- 汽車圖像傳感器的應(yīng)用 0次下載
- 高級(jí)駕駛輔助系統(tǒng)(ADAS)汽車環(huán)視技術(shù)簡(jiǎn)述 15次下載
- 基于圖像傳感器的太陽(yáng)方位檢測(cè)系統(tǒng)研究
- 基于CMOS圖像傳感器的成像系統(tǒng)設(shè)計(jì)
- 接觸式圖像傳感器的發(fā)展與應(yīng)用
- 基于CMOS圖像傳感器的成像系統(tǒng)設(shè)計(jì)
- 機(jī)器視覺(jué)系統(tǒng)如何選擇圖像傳感器 370次閱讀
- 安森美汽車圖像傳感器發(fā)展趨勢(shì) 480次閱讀
- CMOS圖像傳感器的制造工藝 1761次閱讀
- 什么是CMOS圖像傳感器?CMOS圖像傳感器的基本名詞解釋 4660次閱讀
- 關(guān)于圖像傳感器的圖像質(zhì)量要糾正的幾個(gè)誤區(qū) 321次閱讀
- 對(duì)圖像傳感器的認(rèn)識(shí)誤區(qū):傳感器類型 559次閱讀
- 關(guān)于圖像傳感器的像素誤區(qū) 505次閱讀
- 關(guān)于圖像傳感器圖像質(zhì)量的四大認(rèn)知誤區(qū) 512次閱讀
- CMOS圖像傳感器的FPGA邏輯設(shè)計(jì)解析 5767次閱讀
- cmos圖像傳感器結(jié)構(gòu)_cmos圖像傳感器市場(chǎng) 5029次閱讀
- CMOS圖像傳感器 自動(dòng)駕駛汽車的理想選擇 1895次閱讀
- 汽車:符合AEC-Q100認(rèn)證的圖像傳感器 5560次閱讀
- ISSCC上的最新圖像傳感器技術(shù) 1464次閱讀
- 基于DSP和CMOS圖像傳感器的實(shí)時(shí)圖像采集系統(tǒng)的實(shí)現(xiàn)方案 2761次閱讀
- CMOS圖像傳感器的基本原理及設(shè)計(jì)考慮 7821次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1491次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 95次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識(shí)別和講解說(shuō)明
- 4.28 MB | 18次下載 | 4 積分
- 5開(kāi)關(guān)電源原理及各功能電路詳解
- 0.38 MB | 11次下載 | 免費(fèi)
- 6100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 7基于單片機(jī)和 SG3525的程控開(kāi)關(guān)電源設(shè)計(jì)
- 0.23 MB | 4次下載 | 免費(fèi)
- 8基于AT89C2051/4051單片機(jī)編程器的實(shí)驗(yàn)
- 0.11 MB | 4次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開(kāi)關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537793次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評(píng)論
查看更多