精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

視海芯圖Transformer加速SoC助力AR/VR設備性能升級

Monika觀察 ? 來源:電子發燒友網 ? 作者:莫婷婷 ? 2023-05-12 12:15 ? 次閱讀

5月12日,第十三屆松山湖中國IC創新高峰論壇在廣東東莞松山湖凱酒店舉行,本屆活動繼續由中國半導體行業協會IC設計分會(ICCAD)、芯原微電子、松山湖管委會主辦,東莞松山湖集成電路設計服務中心,東莞市生技置業有限公司承辦。電子發燒友網受邀參與活動并作現場報道。

成都視海芯圖微電子有限公司創始人許達文認為,很多AI模型的主干網絡正從CNN轉變為Transformer,Transformer可以解決終端芯片訪存密集型、不規則訪存,以及NPU利用率低的難題。

視海芯圖推出了Transformer加速SoC——SH1580芯片,采用12nm工藝,具備自研NPU、高性能主核、高性能圖像處理的特點。SH1580芯片具備2TOPS@INT8有效算力,在圖像處理方面,支持AI-HDR、3D-ToF圖像處理等。


許達文介紹,SH1580芯片的核心技術為PTPU架構,具備定制電路支持Transformer存儲結構和訪存優化的特點,另外視海芯圖還設計了可重構數據流,同時高效支持CNN和Transformer。

在AR/VR的應用中,為了能夠讓數字世界跟物理世界實現深層次的融合,需要把數字信息映射到物理世界中。這就需要場景識別功能,還需要支持混合性輸入,包括圖像輸入、語音輸入。“特別是圖像輸入這塊,往往要輸入、接收2D、3D圖像。這么復雜的一些場景和算法的話,它就需要一個配套的算法來支撐。”許達文表示。而基于Transformer為架構的模型能夠結束一部分問題。

在AR/VR設備中,SH1580芯片在SLAM中可以做特征點匹配LoFTR、地點識別SVT-Net,另外在AR/VR設備的應用中還能實現語義分割 SegFormer以及三維重建 Point-Bert。傳統CNN算法很難做稀疏紋理匹配,但是Transformer可以做到準確的無紋理特征識別。

值得一提的是,AR/VR設備對于需要有低功耗有著一定的需求。SH1580芯片基于12nm工藝。采用電源與芯片架構,idle功耗為46mW,超低功耗模式可以做到6mW。該產品在AR眼鏡上已有應用案例。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • Ar
    Ar
    +關注

    關注

    24

    文章

    5083

    瀏覽量

    169292
  • Transformer
    +關注

    關注

    0

    文章

    141

    瀏覽量

    5982
收藏 人收藏

    評論

    相關推薦

    科技32位MCU加速工業芯片國產替代

    隨著國產高性能32位MCU的崛起,科技憑借其在產品性能、可靠性、安全性和低功耗方面的優勢,以及不斷完善的開發生態,正逐步打破國際廠商的壟斷地位。CS32系列MCU的多樣化產品線,將
    的頭像 發表于 11-14 15:00 ?294次閱讀
    <b class='flag-5'>芯</b><b class='flag-5'>海</b>科技32位MCU<b class='flag-5'>加速</b>工業芯片國產替代

    助力榮耀MagicBook Pro 16,科技EC芯片再下一城

    特別值得一提的是,榮耀MagicBook Pro 16選擇搭載了科技高性能EC芯片,助力榮耀AI PC在整機性能上實現更為流暢、高效和可
    的頭像 發表于 08-09 15:50 ?344次閱讀
    <b class='flag-5'>助力</b>榮耀MagicBook Pro 16,<b class='flag-5'>芯</b><b class='flag-5'>海</b>科技EC芯片再下一城

    思回歸安防,Hi35I6CV610打頭陣,IPC SoC市場戰火重燃

    電子發燒友網報道(文/黃晶晶)最近,AI泛視頻解決方案提供商重磅宣布了,2024年思新品Hi35I6CV610首發量產的消息。這意味著,繼華為麒麟手機SoC芯片回歸之后,華為
    的頭像 發表于 05-18 01:32 ?9577次閱讀
    <b class='flag-5'>海</b>思回歸安防,Hi35I6CV610打頭陣,IPC <b class='flag-5'>SoC</b>市場戰火重燃

    科技推出壓容二合一SoC系列芯片

    近日,科技宣布推出一款創新的“壓容二合一SoC”系列芯片,這款芯片融合了電阻式和容式檢測模塊,實現了“容式觸摸、滑動+壓力檢測”的高可靠性人機交互體驗。
    的頭像 發表于 05-16 15:12 ?795次閱讀

    應用筆記:CPW3101入門指南

    本技術說明文檔提供關于 CPW3101 開發板 UFCS_EVB_V1.2 功能介紹、特性說明、使用說明、IAP升級、使用注意事項等,旨在幫助用戶更好地使用 CPW3101 開發板_V1.2,進行
    發表于 05-16 14:39

    應用筆記:CSU3AF10 IAP功能設計指南_V1.0

    本文檔旨在幫助用戶基于科技 CSU3AF10 開發設計的產品中加入 IAP 功能,從而通過 USBType-C 接口的 CC 引腳(利用 PD 協議)或 DP & DM 引腳
    發表于 05-16 14:29

    海通用 MCU 應用筆記 :CS32F103 系列 MCU IAP 升級指南

    本應用筆記旨在幫助指導用戶針對 CORTEX-M3 MCU CS32F103 系列單片機 IAP 應用的快速開發。本應用筆記實現了 CAN 和 USART 兩種接口方式來開發 IAP 應用,協議
    發表于 05-16 11:40

    混合信號 SOC 產品用戶指南

    混合信號 SOC 產品是指集成了 RISC MCU、高精度 ADC、LED/LCD 顯示模塊等高系統集成的產品。芯片系統資源為特定應用領域量身定做,集高性能,高集成度,高性價比于一
    發表于 05-16 09:51

    晶心科技與元合作打造全球首次采用RISC-V IP SoC的車規級CMOS圖像傳感器產品

    RISC-V IP供貨商Andes晶心科技(TWSE:6533)與邊緣運算芯片供貨商元智能科技共同宣布,元 MAT系列作為全球首次采用RISC-V IP
    的頭像 發表于 02-22 10:55 ?787次閱讀

    arvr的區別與聯系 arvr哪個更高級

    存在著明顯的差異。本文將對ARVR的區別和聯系介紹。 首先,我們需要了解ARVR的定義和基本原理。AR是一種技術,它利用計算機圖形學技術
    的頭像 發表于 01-19 10:48 ?5773次閱讀

    鼎盛合|SOC芯片開發中的技術問題

    設計的特定功能。如SOC芯片大多數則是基于測量精度領域而設計,它是一種集成ADC和MCU主控功能的芯片,具有高精度和穩定性的特點。測量精度SOC芯片通過集成高精度的傳感器和信號處
    的頭像 發表于 01-12 15:41 ?535次閱讀

    助力VR/AR顯示技術革新,歌爾光學攜多款全新光學方案參展CES

    方案悉數亮相,其中包括全球首家采用先進COC材料模內注塑技術的高性能VR Pancake模組、多款全新升級的全彩衍射光波導AR顯示模組等,助力
    發表于 01-11 10:43 ?315次閱讀
    <b class='flag-5'>助力</b><b class='flag-5'>VR</b>/<b class='flag-5'>AR</b>顯示技術革新,歌爾光學攜多款全新光學方案參展CES

    求推薦一款SOC電子秤方案

    你好,的伙伴。 我目前正在CS32A10*系列SOC開發電子秤方案,有沒有現成的評估板demo或者相關方案可以推薦的?請幫忙介紹,謝謝。
    發表于 12-25 21:08

    Transformer大模型部署在端側,IPC SoC正在普惠AI

    是其核心之一。最近愛元智帶來的兩款IPC SoC新品在黑光全彩處理、適配Transformer大模型等方面表現十分亮眼,愛元智副總裁史欣也向媒體分享了公司對IPC
    的頭像 發表于 12-08 13:50 ?1126次閱讀
    把<b class='flag-5'>Transformer</b>大模型部署在端側,IPC <b class='flag-5'>SoC</b>正在普惠AI

    ***新突破!PC新品全發布,助力英特爾PC產業生態

    科技為何進入PC賽道?其PC業務戰略是什么?這次發布的新品在性能和應用領域有哪些突破?科技和英特爾PC生態如何實現在PC賽道的生態合
    的頭像 發表于 11-29 18:14 ?2057次閱讀
    ***新突破!<b class='flag-5'>芯</b><b class='flag-5'>海</b>PC新品全<b class='flag-5'>芯</b>發布,<b class='flag-5'>助力</b>英特爾PC產業生態