精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Ambarella推出一款名為CV2的新型相機SoC

NJ90_gh_bee81f8 ? 來源:未知 ? 作者:胡薇 ? 2018-05-15 14:47 ? 次閱讀

自動駕駛產業不乏想要超越Mobileye計算機視覺SoC的視覺芯片供應商,安霸(Ambarella)就是其中之一。該公司正致力于縮短與Mobileye的距離,特別是因為Mobileye不僅是業界先驅且仍持續主導基于視覺的先進駕駛輔助(ADAS)和高度自動駕駛車市場。

Ambarella日前推出了一款名為CV2的新型相機SoC,專用于提供深度神經網絡(DNN)和立體視覺處理,瞄準ADAS和自動駕駛車市場。Ambarella宣稱擁有兩項與競爭對手不同的優勢,其一是VisLab開發的新型計算機視覺架構——Ambarella于2015年收購了這家歐洲計算機視覺與智能汽車控制系統開發商。另一項則是Ambarella自家設計且經現場驗證的低功耗、高解析(HD)與超高解析(Ultra HD)視覺處理芯片,可用于IP監控、運動、無人機與后裝行車記錄器等應用。

pIYBAFr6g6OAYphWAAI8yYaJwiI561.png

CV2架構圖

結合VisLab的經驗和技術,Ambarella開發出符合車規級的CV2,在一個芯片中整合了先進的計算機視覺、圖像處理、4Kp60視頻編碼與立體視覺技術。CV2延續上一代的CV1,據稱可提供較CV1更高20倍的深度神經網絡性能。

CV1和CV2都可在同一芯片上提供單眼和立體視覺處理。VisLab創辦人Alberto Broggi解釋:“單眼視覺可在遠處偵測并分類對象——最遠達180公尺——而立體視覺相機能夠捕捉3D物體的形狀,而且無需訓練即可檢測到一般障礙物?!?/p>

Broggi說,Ambarella的視覺SoC“專為在城市駕駛而設計,能執行所有的感知處理”。而像路徑規劃以及轉向和停車等其他操控任務,目前仍留給車載計算機。

然而,Broggi補充說,他的團隊計劃將融合和決策層移植到CV芯片上。

從意大利帕爾馬大學(University of Parma)獨立出來后,由Broggi教授帶領的計算機視覺團隊成為Ambarella高度自動化車輛的自動駕駛車(AV)軟件骨干。

針對Ambarella的視覺解決方案,IHS Markit信息娛樂和ADAS研究總監Egil Juliussen說:“Ambarella的新產品看起來很不錯,可望用于ADAS、L4和L5級自動駕駛。我認為,正是由于他們的技術涵蓋從算法、專利到SoC,而使其自動駕駛平臺與眾不同。”

Juliussen說:“他們還取得了加州的AV路測執照——只不過是第52家獲得執照的公司?!彼麖娬{Ambarella已能“提供開發工具和API,可讓1級(Tier-1)供應商和汽車OEM連接ADAS和L3到L5系統。”Ambarella計劃在第二季出樣CV2。

單眼視覺 vs.立體視覺

開發ADAS和全自動駕駛車究竟要用單眼視覺還是立體視覺?這是長久以來爭辯的焦點。英特爾(Intel)旗下子公司Mobileye認為,單眼相機用于辨識車道、行人以及交通標志和路上的其他車輛時已經夠好了。

但是,立體視覺的支持者則認為,以3D視角計算來自單個相機傳感器接收的平面2D架構時,單眼視覺系統經常不夠穩定和可靠。

Ambarella在其芯片中融合了單眼和立體視覺處理。例如,其嵌入式車輛駕駛(EVA)平臺提供基于4K CV1的立體視覺相機,用于立體障礙物檢測的感知范圍超過150公尺。據該公司稱,它還支持超過180公尺的對象單眼視覺分類功能。

Broggi認為,立體視覺是一項重要的功能升級。“許多信息都包含在對象的3D形狀中。即使相機看到一個未知形狀的物體——系統以前從未見過的東西,而且未經辨識訓練——立體視覺也能進行處理”。

擁有單眼和立體視覺功能也會導入重要的冗余。立體視覺能夠發現單眼相機看不見或無法辨認的對象。

針對這兩類型產品的比較,Juliussen說:“Mobileye是采取‘單眼相機’策略的主要公司;當攝影機價格昂貴時,這種途徑效果不錯。但立體相機的價格正持續降低。我認為兼單眼和立體視覺更好,能為Ambarella帶來更大的市場和應用領域。”

高動態范圍至關重要

Broggi說,“VisLab和Ambarella連手可說是絕佳組合,”因為兩家公司的團隊之間工作并未重迭;更重要的是,CV1和CV2均采用Ambarella的影像信號管路實現高動態范圍(HDR)成像、ultra HD處理以及在立體相機實現自動校準。

除了卷積神經網絡(CNN)和DNN的所有功能之外,由ADAS和AV部署的視覺傳感器還可以從視覺SoC提供的HD影像和高性能影像預處理功能中受益。

由于立體相機需要非常高的穩定度,Broggi說:“立體相機的校準可能會是一項挑戰,尤其是在汽車應用中,”因為汽車持續振動且經常在寬溫度范圍內運行。透過Ambarella的CV1和CV2芯片,“我們可以在芯片上實時自動校準。”

同樣地,當機器面對LED頭燈和交通標志時,ADAS和AV可能會發生混淆。當LED閃爍時——它可能會被開啟和關閉——其閃爍的假影可能引發機器視覺故障。Broggi解釋說,這種情況經常發生在LED燈和相機的頻率不同步時。

Ambarella的CV1和CV2可以透過平均訊框數來減輕這種假影。他說:“我們可以在影像管線的早期階段使用預處理來清理它。”

對于最近Uber釀禍撞死一名在夜間穿越街道的婦女,Broggi并未發表任何評論,但他說,Ambarella提供支持HDR功能的芯片“能夠在極低光照條件下處理影像?!?/p>

EVA架構

對于道路試駕,Ambarella開發了EVA自動駕駛平臺。EVA的感測套件目前已導入Lincoln MKZ車系,主要采用視覺傳感器,無需光達(LiDAR)即可實現自動駕駛。然而,基于EVA的AV還包含Bosch制造的前保險杠式雷達,以獲得更好的正面視野。

圖2:EVA平臺架構

Broggi堅信,視覺是使自動駕駛車“充滿信心”的唯一傳感器。Broggi表示,相較于每秒產生200萬個3D點的光達,遠距離的立體相機每秒可擷取8-9億個3D點。

車輛通常配備兩組不同的立體相機。一套是遠距離感知,另一套是短距離感知。遠距離相機使用兩個4K傳感器(8百萬像素),基線長30公分,水平視角75度。短距離相機系統使用4個支持200萬像素的立體相機,以及10cm基線和魚眼鏡頭。

Ambarella解釋,每個遠距離相機都包含2個CV1 SoC。在短距離系統中,所有的相機都連接至一個中央模塊,透過2個CV1 SoC處理4個相機。

CV2的設計用于在芯片中支持4個立體相機和4個單眼相機。而CV1采用14nm CMOS工藝制造,但Ambarella的CV2將由三星(Samsung)以10nm工藝制造。盡管CV2的復雜度增加了,但Broggi說:“我們能夠保持相同的低功率——4至5瓦(W)?!?/p>

根據Juliussen的觀察,開發汽車用的計算機視覺產品是Ambarella的一項重大目標,該公司去年為此分配了超過50%的研發預算。Juliussen說:“如今看來他們取得了不錯的進展。目前的產品已被中國OEM應用于ADAS市場?!?/p>

他補充說:“他們目前的產品還被用于相機售后市場,如儲存行車數據的行車記錄器(EDR)。EDR將成為L4和L5自動車的標準配備?!边@就是為什么CV2支持4Kp60 AVC和HEVC視頻編碼。該芯片可以將視頻記錄到汽車ADAS和自動駕駛系統。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • soc
    soc
    +關注

    關注

    38

    文章

    4122

    瀏覽量

    217949
  • 自動駕駛
    +關注

    關注

    783

    文章

    13687

    瀏覽量

    166152

原文標題:安霸立體視覺處理SoC會給自動駕駛市場帶來什么?

文章出處:【微信號:gh_bee81f890fc1,微信公眾號:面包板社區】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    如何用OpenCV的相機捕捉視頻進行人臉檢測--基于米爾NXP i.MX93開發板

    ;gt; 經測試,只能支持640*480 為此建立opencv_test.py import cv2 video = cv2.VideoCapture(0) 設置相機參數video .set
    發表于 11-15 17:58

    TO1013---同星智能推出一款新型CAN FD光電收發器

    新品發布Newproductsrelease同星智能為應對汽車行業的快速發展,直在積極推出新產品,以滿足市場對汽車電子基礎工具鏈產品的不斷升級和多樣化需求。同星智能近期又推出一款
    的頭像 發表于 08-30 12:36 ?295次閱讀
    TO1013---同星智能<b class='flag-5'>推出</b><b class='flag-5'>一款</b>創<b class='flag-5'>新型</b>CAN FD光電收發器

    如何挑選一款合適的X射線相機

    X射線被廣泛應用于元素辨析,納米結構,醫學分析,半導體加工等領域,例如:相干X射線衍射成像,X射線顯微鏡,X射線等離診斷,深紫外刻蝕技術。 一款合適的X射線相機對于高質量的成像和實驗數據分析尤為關鍵
    的頭像 發表于 07-12 06:30 ?251次閱讀
    如何挑選<b class='flag-5'>一款</b>合適的X射線<b class='flag-5'>相機</b>

    一款完美用于相機鏡頭的馬達驅動芯片TMC2300-LA

    卓聯微科技TMC2300-LA一款完美用于相機鏡頭的馬達驅動芯片TMC2300-LA是一款用于高達1.2ARMS的兩相步進電機的低壓驅動芯片,低電壓的步進電機驅動器是用于電池供電的、空間和待機功率
    的頭像 發表于 06-14 08:27 ?541次閱讀
    <b class='flag-5'>一款</b>完美用于<b class='flag-5'>相機</b>鏡頭的馬達驅動芯片TMC2300-LA

    立訊精密聯合悠聲科技推出一款新型雙揚聲器音頻模塊Gemini 2.0

    5月27日,立訊精密和全球領先的MEMS揚聲器供應商悠聲科技(USound)合作推出一款新型雙揚聲器音頻模塊Gemini 2.0。音頻模塊的設計超出了真正無線立體聲 (TWS) 耳塞和入耳式監聽器(IEM)的要求。
    的頭像 發表于 05-27 17:28 ?657次閱讀

    Ampere將與高通聯手推出一款新型芯片

    近日,美國初創公司Ampere Computing宣布將與高通公司聯手推出一款新型芯片,這款芯片的主要目標是降低人工智能芯片的運行能耗。這創新舉措無疑將為人工智能領域帶來
    的頭像 發表于 05-20 10:29 ?406次閱讀

    Vishay推出一款新型汽車級IHDF邊繞通孔電感器

    Vishay 推出一款新型汽車級 IHDF 邊繞通孔電感器,額定電流 72 A,飽和電流高達230 A。Vishay Custom Magnetics IHDF-1300AE-1A 采用鐵氧體磁芯技術
    的頭像 發表于 04-25 10:22 ?452次閱讀
    Vishay<b class='flag-5'>推出</b><b class='flag-5'>一款</b><b class='flag-5'>新型</b>汽車級IHDF邊繞通孔電感器

    安霸發布5nm制程的CV75S系列芯片,進步拓寬AI SoC產品路線圖

    防展(ISC West)期間發布 5nm 制程的 CV75S 系列芯片,進步拓寬其 AI SoC 產品路線圖。
    的頭像 發表于 04-09 10:26 ?1606次閱讀

    文探討一款名為H6-C111B2W的LED

    在探索現代電子元件的微觀世界中,我們經常會遇到些令人費解的技術參數,它們如同星空中的星座,既復雜又神秘。今天,我們將深入探討一款名為H6-C111B2W的LED產品,它的參數如同
    的頭像 發表于 03-22 18:03 ?1027次閱讀

    Diodes推出一款符合汽車規格的新型線性LED驅動器

    Diodes 公司推出一款符合汽車規格* 的新型線性 LED 驅動器,讓用戶能獨立控制三個通道的亮度和色彩。
    的頭像 發表于 03-12 14:38 ?1061次閱讀

    介紹一款高性能低功耗的SOC集成無線收發芯片—XL2409

    XL2409是一款高性能低功耗的SOC集成無線收發芯片,集成M0核MCU,工作在2.400~2.483GHz世界通用ISM頻段。
    的頭像 發表于 03-01 16:28 ?1277次閱讀
    介紹<b class='flag-5'>一款</b>高性能低功耗的<b class='flag-5'>SOC</b>集成無線收發芯片—XL2409

    三星顯示展出一款名為Cling Band的卷曲腕戴概念機

    WitDisplay消息,在折疊之后,卷曲是許多人預想中的下個手機新型態。而在此次 MWC 上,柔性 OLED 面板龍頭三星顯示便帶來了一款名為 Cling Band 的卷曲腕戴概念
    的頭像 發表于 02-29 11:07 ?731次閱讀

    英飛凌聯手日本歐姆龍推出一款集成GaN技術的V2X充電樁

    近日,英飛凌聯手日本歐姆龍推出一款集成GaN技術的V2X 充電樁。
    的頭像 發表于 01-19 10:23 ?1100次閱讀
    英飛凌聯手日本歐姆龍<b class='flag-5'>推出</b>了<b class='flag-5'>一款</b>集成GaN技術的V<b class='flag-5'>2</b>X充電樁

    LG發布一款名為“MyView”的32英寸4K家用顯示器/智能電視混合產品

    據悉,LG將在今年的消費電子展上展示一款名為“MyView”的32英寸4K家用顯示器/智能電視混合產品。
    的頭像 發表于 01-12 16:22 ?1235次閱讀

    Ambarella展示了在其CV3-AD芯片上運行LLM的能力

    Ambarella前不久展示了在其CV3-AD芯片上運行LLM的能力。這款芯片是CV3系列中最強大的,專為自動駕駛設計。
    的頭像 發表于 11-28 09:05 ?1767次閱讀
    <b class='flag-5'>Ambarella</b>展示了在其<b class='flag-5'>CV</b>3-AD芯片上運行LLM的能力