精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

類ChatGPT訓練需高性能芯片大規模并聯,高速接口IP迎紅利時代

Felix分析 ? 來源:電子發燒友網 ? 作者:吳子鵬 ? 2023-03-06 09:18 ? 次閱讀

電子發燒友網報道(文/吳子鵬)近段時間,ChatGPT的火熱重新掀起人工智能產業熱潮,尤其是AIGC(指利用人工智能技術來生成內容)領域,已經進入到狂飆姿態,頭部科技企業爭分奪秒地尋求搶先發布類ChatGPT應用。

眾所周知,類ChatGPT應用是一個吞金獸,微軟公司為了訓練ChatGPT使用了1萬張英偉達的高端GPU。“從訓練的角度來看,計算性能再好的GPU芯片比如A100如果無法集群在一起去訓練,那么訓練一個類ChatGPT的大模型可能需要上百年。因此,AI大模型的訓練對高速接口IP是一個巨大的挑戰,也是一個巨大的機遇。”奎芯科技市場及戰略副總裁唐睿在接受電子發燒友網采訪時表示。

奎芯科技成立于2021年,該公司的口號是“芯粒高速互聯,海量算力源泉 ”。目前,奎芯科技已經推出的高速接口IP組合包括USB、PCIe、SATA、SerDes、MIPIDDRHDMI、DP、HBM等豐富的類型。

類ChatGPT帶動接口IP發展

半導體產業分布來看,IP是底層技術,接口IP同樣如此,因此關鍵性和重要性是不言而喻的。那么在AIGC產業里,接口IP能夠發揮哪些作用呢?唐睿提到了以下幾點。

首先是芯片上的互聯接口,也就是Die to Die類型的互聯接口IP,包括UCIe等,用以擴充單芯片的計算能力;其次是Chip to Chip類型的互聯接口IP,包括SerDes/PCIe/CXL等,能夠加快芯片之間的互聯和數據交換,滿足更高帶寬的需求;此外還有內存接口IP,包括SATA、DDR、HBM等,能夠用于打造更高性能的存儲產品,幫助類ChatGPT存儲和交換大規模的數據;再上一層就是數據通訊接口的接口IP。因此,從訓練的角度來看,類ChatGPT應用的爆發,能夠帶來非常大的接口IP需求。

在此前的預測里,有市場調研機構的數據顯示,2022年至2026年高速互聯IP的市場規模有望以75%的年復合增長率快速成長。“接口IP市場的增長一定是跟隨整個高性能計算芯片大趨勢的,包括芯片運算性能、內存和帶寬方面的提升都需要接口IP的幫助,因此芯片用量的提升一定會帶來更大的接口IP用量。”唐睿認為,“同時計算芯片性能的提升已經受限于摩爾定律放緩的影響,單芯片的性能會逐漸遇到瓶頸,那么互聯組成算力集群就是一個有效的手段,這也會加快推動接口IP的發展。”

雖然產業熱潮來臨,不過唐睿并不擔心一下子會涌入很多同行或者友商,造成國內接口IP產業內卷。“市場競爭的激烈程度會增加,但接口IP是高門檻的領域,目前國內做高速混合電路的人才其實并不多,特別是在先進制程上做高速模擬電路設計的人才更少,因此從零組建團隊進入這個領域是非常困難的。”他對此講到。

國產廠商的布局和追趕

從全球產業格局來看,在接口IP方面,目前新思科技和楷登電子等EDA廠商以及其他國際上的接口IP廠商還處于領先位置。相關數據顯示,截止到2021年,國產接口IP的自給率還不足10%。

“目前,從技術上來看,國產接口IP廠商確實還處于追趕的位置,不過這種差距已經越來越小。”唐睿指出,“2023年,奎芯科技將會推出一系列性能達到國際領先水平的接口IP產品,包括HBM3以及其他領先的D2D類型的互聯接口IP。”

同時,他還講到,在服務國內客戶方面,實際上也會存在很多本地化的需求,需要根據這些需求結合晶圓廠的工藝特色,提供IP解決方案。奎芯科技很多IP產品,在研發的過程中或者研發之前,就得到了客戶方的問詢,圍繞客戶的芯片架構,有非常清晰的需求。奎芯科技聯合自己的下游客戶成立了多個產業聯盟,通過這些聯盟將不同類型的計算芯片公司聯合在一起,協同發展,圍繞數據中心應用把國產方案搭建好,彌補國內這一塊的空白。

當前,AI大模型訓練所用到的算力集群基本上都是基于英偉達通用算力芯片來打造,在這方面國產通用算力芯片還存在一定的性能差距。唐睿表示,國產高性能計算芯片還是有機會的,AI大模型并不是一個近期出現的新鮮事物,近些年國內AI產業已經在跟進這一趨勢,只是類ChatGPT類型應用背后的大模型參數規模更大。針對這方面的需求,國內芯片產業也早就啟動了這方面的布局,包括奎芯科技所在的接口IP賽道,都在向這個方向努力。不過,從IP研發到芯片設計,再到應用落地,這中間會有一個時間差。實際上,國外的公司也是在用之前的芯片通過互聯在做這方面的硬件支持。

“還需要特別提出的是,AIGC是一個軟硬件結合的應用。軟件方面,算法模型的體量也是一個值得研究去突破的方向。目前,國外開源的AIGC算法里,也并非只有Open AI的GPT算法,通過介紹信息來看,也有一些參數更小的模型能夠實現類ChatGPT應用。我們實際上可以借鑒這些模型,以減少軟件對硬件的需求壓力。”唐睿最后講到。

小結

IP對半導體產業有巨大的撬動力量,在全球范圍內,約60多億美元的IP銷售額,帶動的是5000億美元的全球半導體市場銷售額。對于***而言,短期內實現單芯片性能暴增的難度非常大,不過通過高速接口IP,用算力集群的方式,也能夠逐步進入類ChatGPT的紅利市場。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 芯片
    +關注

    關注

    454

    文章

    50439

    瀏覽量

    421915
  • IP
    IP
    +關注

    關注

    5

    文章

    1661

    瀏覽量

    149336
  • ChatGPT
    +關注

    關注

    29

    文章

    1548

    瀏覽量

    7505
收藏 人收藏

    評論

    相關推薦

    使用EMBark進行大規模推薦系統訓練Embedding加速

    推薦系統是互聯網行業的核心系統,如何高效訓練推薦系統是各公司關注的核心問題。目前,推薦系統基本上都是基于深度學習的大規模 ID 模型,模型包含數十億甚至數百億級別的 ID 特征,典型結構如圖 1 所示。
    的頭像 發表于 10-31 14:46 ?130次閱讀
    使用EMBark進行<b class='flag-5'>大規模</b>推薦系統<b class='flag-5'>訓練</b>Embedding加速

    什么是協議分析儀和訓練

    長時間、大規模的分析。 軟件型協議分析儀:基于計算機軟件的工具,通過安裝在計算機上實現網絡數據包的捕獲、解析和分析,靈活且便于擴展。 二、訓練器在電子設計和測試領域,訓練器通常與協議分析儀結合使用,用于對特定
    發表于 10-29 14:33

    端到端InfiniBand網絡解決LLM訓練瓶頸

    ChatGPT對技術的影響引發了對人工智能未來的預測,尤其是多模態技術的關注。OpenAI推出了具有突破性的多模態模型GPT-4,使各個領域取得了顯著的發展。 這些AI進步是通過大規模模型訓練實現
    的頭像 發表于 10-23 11:26 ?298次閱讀
    端到端InfiniBand網絡解決LLM<b class='flag-5'>訓練</b>瓶頸

    芯品# 高性能計算芯片

    Arm Neoverse基于CSS的CPU芯片組具有超高速接口和高級封裝,可為AI,HPC和網絡基礎設施提供可擴展的性能 英國倫敦和加拿大多倫多-2024年6月6日- Alphawav
    的頭像 發表于 06-27 10:28 ?6930次閱讀

    開芯院發布全球首個開源大規模片上互聯網絡IP“溫榆河”

    2024年5月21日,北京開源芯片研究院(簡稱“開芯院”)通過線上會議的方式,向會員單位正式發布了全球首個開源大規模片上互聯網絡(NetworkonChip,NoC)IP——研發代號“溫榆河”。這一
    的頭像 發表于 06-04 08:37 ?11.7w次閱讀
    開芯院發布全球首個開源<b class='flag-5'>大規模</b>片上互聯網絡<b class='flag-5'>IP</b>“溫榆河”

    高性能計算集群的能耗優化

    高性能計算(HighPerformanceComputing,HPC)是指利用大規模并行計算機集群來解決復雜的科學和工程問題的技術。高性能計算集群的應用領域非常廣泛,包括天氣預報、生物信息學
    的頭像 發表于 05-25 08:27 ?386次閱讀
    <b class='flag-5'>高性能</b>計算集群的能耗優化

    進一步解讀英偉達 Blackwell 架構、NVlink及GB200 超級芯片

    GB200 超級芯片模塊組合而成,通過 Nvlink 鏈接,提供了超大規模的并行計算能力和極高的內存帶寬,適用于大規模的 AI 訓練、推理和高性能
    發表于 05-13 17:16

    構建高性能計算芯片

    計算的異構多核架構,對整個芯片行業的高性能 CPU 開發產生了影響。 這些芯片都不太可能進行商業銷售。它們針對特定的數據類型和工作負載進行了優化,設計預算龐大,但可以通過提高性能和降低
    的頭像 發表于 04-25 10:23 ?1281次閱讀
    構建<b class='flag-5'>高性能</b>計算<b class='flag-5'>芯片</b>

    名單公布!【書籍評測活動NO.30】大規模語言模型:從理論到實踐

    和強化學習展開,詳細介紹各階段使用的算法、數據、難點及實踐經驗。 預訓練階段需要利用包含數千億甚至數萬億單詞的訓練數據,并借助由數千塊高性能GPU 和高速網絡組成的超級計算機,花費數十
    發表于 03-11 15:16

    Xilinx FPGA NVMe主機控制器IP高性能版本介紹應用

    獨立的數據寫入AXI4-Stream/FIFO接口和數據讀取AXI4-Stream/FIFO接口,非常適合于超高容量和超高性能的應用。此外,NVMe Host Controller IP
    發表于 03-09 13:56

    晶晟微納發布N800超大規模AI算力芯片測試探針卡

    近日,上海韜盛科技旗下的蘇州晶晟微納宣布推出其最新研發的N800超大規模AI算力芯片測試探針卡。這款高性能探針卡采用了前沿的嵌入式合金納米堆疊技術,旨在滿足當前超大規模AI算力
    的頭像 發表于 03-04 13:59 ?930次閱讀

    NVMe Host Controller IP實現高性能存儲解決方案

    電子發燒友網站提供《NVMe Host Controller IP實現高性能存儲解決方案.pdf》資料免費下載
    發表于 02-21 14:28 ?1次下載

    【國產FPGA+OMAPL138開發板體驗】(原創)6.FPGA連接ChatGPT 4

    方面。而且,由于ChatGPT 4是一個大型的語言模型。通常,FPGA會用于處理一些底層的數據流或執行特定的硬件加速任務,而ChatGPT 4這樣的模型則會在云端或高性能服務器上運行。不過
    發表于 02-14 21:58

    對話國產EDA和IP廠商,如何攻克大規模數字電路設計挑戰?

    芯片設計企業關注的焦點。作為芯片產業的根技術和硬科技,EDA和IP大規模數字電路設計中發揮著不可替代的作用,也是集成電路技術發展的重要助推器。其運用的好壞,決定著
    的頭像 發表于 12-28 08:23 ?1178次閱讀
    對話國產EDA和<b class='flag-5'>IP</b>廠商,如何攻克<b class='flag-5'>大規模</b>數字電路設計挑戰?

    態路小課堂丨InfiniBand與以太網:AI時代的網絡差異

    今年以來,InfiniBand因其在AI領域中的應用而備受矚目。 InfiniBand介紹 InfiniBand (也稱為“無限帶寬”,縮寫為IB)是一種高速網絡技術,具有高性能、低延遲、可靠和靈活的數據傳輸功能,適用于要求高速
    的頭像 發表于 11-29 18:16 ?868次閱讀
    態路小課堂丨InfiniBand與以太網:AI<b class='flag-5'>時代</b>的網絡差異