精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

英特爾發布新一代神經擬態系統Hala Point,11.5億神經元,12倍性能提升

looger123 ? 來源:looger123 ? 作者:looger123 ? 2024-04-19 09:43 ? 次閱讀

作為英特爾首個神經元數量達到11.5億的神經擬態系統,Hala Point為更高效、規模更大的AI開辟了道路。


英特爾發布了代號為Hala Point的大型神經擬態系統。Hala Point基于英特爾Loihi 2神經擬態處理器打造而成,旨在支持類腦AI領域的前沿研究,解決AI目前在效率和可持續性等方面的挑戰。在英特爾第一代大規模研究系統Pohoiki Springs的基礎上,Hala Point改進了架構,將神經元容量提高了10倍以上,性能提高了12倍。

英特爾研究院神經擬態計算實驗室總監Mike Davies 表示:“目前,AI模型的算力成本正在持續上升。行業需要能夠規模化的全新計算方法。為此,英特爾開發了Hala Point,將高效率的深度學習和新穎的類腦持續學習、優化能力結合起來。我們希望使用Hala Point的研究能夠在大規模AI技術的效率和適應性上取得突破。”

Hala Point在主流AI工作負載上展現了出色的計算效率。研究顯示,在運行傳統深度神經網絡時,該系統能夠每秒完成多達2萬萬億次(20 petaops)運算,8位運算能效比達到了15 TOPS/W,相當于甚至超過了基于GPUCPU的架構。Hala Point有望推動多領域AI應用的實時持續學習,如科學研究、工程、物流、智能城市基礎設施管理、大語言模型(LLMs)和AI助手(AI agents)。

目前,Hala Point是一個旨在改進未來商用系統的研究原型。英特爾預計其研究將帶來實際技術突破,如讓大語言模型擁有從新數據中持續學習的能力,從而有望在AI廣泛部署的過程中,大幅降低訓練能耗,提高可持續性。

image.png

深度學習模型的規模正在不斷擴大,參數量可達萬億級。這一趨勢意味著AI技術在可持續性上面臨著嚴峻的挑戰,有必要探索硬件架構底層的創新。神經擬態計算是一種借鑒神經科學研究的全新計算方法,通過存算一體和高細粒度的并行計算,大幅減少了數據傳輸。在本月舉行的聲學、語音與信號處理國際會議(ICASSP)上,英特爾發表的研究表明,Loihi 2在新興的小規模邊緣工作負載上實現了效率、速度和適應性數量級的提升[1]。

Hala Point在其前身Pohoiki Springs的基礎上實現了大幅提升,基于神經擬態計算技術提升了主流、常規深度學習模型的性能和效率,尤其是那些用于處理視頻、語音和無線通信等實時工作負載的模型。例如,在今年的世界移動通信大會(MWC)上,愛立信研究院(Ericsson Research)就展示了其如何將 Loihi 2神經擬態處理器應用于電信基礎設施效率的優化。

Hala Point基于神經擬態處理器Loihi 2打造,Loihi 2應用了眾多類腦計算原理,如異步(asynchronous)、基于事件的脈沖神經網絡(SNNs)、存算一體,以及不斷變化的稀疏連接,以實現能效比和性能的數量級提升。神經元之間能夠直接通信,而非通過內存通信,因此能降低整體功耗。

Hala Point系統由封裝在一個六機架的數據中心機箱中的1152個Loihi 2處理器(采用Intel 4制程節點)組成,大小相當于一個微波爐。該系統支持分布在 140544 個神經形態處理內核上的多達 11.5 億個神經元和 1280 億個突觸,最大功耗僅為 2600 瓦。Hala Point還包括 2300 多個嵌入式 x86 處理器,用于輔助計算。

在大規模的并行結構中,Hala Point集成了處理器、內存和通信通道,內存帶寬達每秒16PB,內核間的通信帶寬達每秒3.5 PB,芯片間的通信帶寬達每秒5TB。該系統每秒可處理超過380萬億次8位突觸運算和超過240萬億次神經元運算。

在用于仿生脈沖神經網絡模型時,Hala Point能夠以比人腦快20倍的實時速度運行其全部11.5億個神經元,在運行神經元數量較低的情況下,速度可比人腦快200倍。雖然Hala Point并非用于神經科學建模,但其神經元容量大致相當于貓頭鷹的大腦或卷尾猴的大腦皮層。

在執行AI推理負載和處理優化問題時, Loihi 2神經擬態芯片系統的速度比常規CPU和GPU架構快50倍,同時能耗降低了100倍[1]。早期研究結果表明,通過利用稀疏性高達10比1的稀疏連接(sparse connectivity)和事件驅動的活動,Hala Point運行深度神經網絡的能效比高達15 TOPS/W[2],同時無需對輸入數據進行批處理。批處理是一種常用于GPU的優化方法,會大幅增加實時數據(如來自攝像頭的視頻)處理的延遲。盡管仍處于研究階段,但未來的神經擬態大語言模型將不再需要定期在不斷增長的數據集上再訓練,從而節約數千兆瓦時的能源。

世界各地領先的學術團體、研究機構和公司共同組成了英特爾神經擬態研究社區(INRC),成員總數超過200個。攜手英特爾神經擬態研究社區,英特爾正致力于開拓類腦AI前沿技術,以將其從技術原型轉化為業界領先的產品

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    60

    文章

    9728

    瀏覽量

    170507
  • AI
    AI
    +關注

    關注

    87

    文章

    28692

    瀏覽量

    265931
  • 深度學習
    +關注

    關注

    73

    文章

    5418

    瀏覽量

    120540
收藏 人收藏

    評論

    相關推薦

    神經元是什么?神經元神經系統中的作用

    神經元,又稱神經細胞,是神經系統的基本結構和功能單位。它們負責接收、整合、傳導和傳遞信息,從而參與和調控神經系統的各種活動。神經元在形態上高
    的頭像 發表于 07-12 11:49 ?427次閱讀
    <b class='flag-5'>神經元</b>是什么?<b class='flag-5'>神經元</b>在<b class='flag-5'>神經系統</b>中的作用

    人工神經元模型的基本構成要素

    人工神經元模型是人工智能領域中的個重要概念,它模仿了生物神經元的工作方式,為機器學習和深度學習提供了基礎。本文將介紹人工神經元模型的基本構成要素。
    的頭像 發表于 07-11 11:28 ?390次閱讀

    人工神經元模型的基本原理是什么

    人工神經元模型是人工智能領域中的個重要概念,它模仿了生物神經系統中的神經元行為,為機器學習和深度學習提供了基礎。 、人工
    的頭像 發表于 07-11 11:26 ?303次閱讀

    生物神經元模型包含哪些元素

    生物神經元模型是神經科學和人工智能領域中的個重要研究方向,它旨在模擬生物神經元的工作原理,以實現對生物神經系統的理解和模擬。
    的頭像 發表于 07-11 11:21 ?374次閱讀

    人工智能神經元的基本結構

    ,旨在創建能夠執行通常需要人類智能的任務的計算機系統神經元是構成人腦的基本單元,也是人工智能研究的基礎。本文將詳細介紹人工智能神經元的基本結構。 神經元的定義
    的頭像 發表于 07-11 11:19 ?369次閱讀

    人工神經元模型的基本原理及應用

    人工神經元模型是人工智能和機器學習領域的個重要概念,它模仿了生物神經元的工作方式,為計算機提供了處理信息的能力。 、人工神經元模型的基本
    的頭像 發表于 07-11 11:15 ?235次閱讀

    人工神經元模型的三要素是什么

    神經元是構成神經系統的基本單元,它們通過突觸與其他神經元相互連接,實現信息的傳遞和處理。人工神經元則是模仿生物神經元
    的頭像 發表于 07-11 11:13 ?215次閱讀

    神經元的分類包括哪些

    神經元神經系統的基本功能單位,它們通過電信號和化學信號進行信息傳遞和處理。神經元的分類非常復雜,可以根據不同的標準進行分類。 神經元
    的頭像 發表于 07-03 11:36 ?523次閱讀

    神經元的結構及功能是什么

    神經元神經系統的基本結構和功能單位,它們通過電信號和化學信號進行信息傳遞和處理。神經元的結構和功能非常復雜,涉及到許多不同的方面。 神經元
    的頭像 發表于 07-03 11:33 ?464次閱讀

    神經元的基本作用是什么信息

    神經元神經系統的基本功能單位,它們在大腦、脊髓和周圍神經系統中發揮著至關重要的作用。神經元的基本作用是接收、處理和傳遞信息。本文將詳細介紹神經元
    的頭像 發表于 07-03 11:29 ?479次閱讀

    神經元的信息傳遞方式是什么

    神經元神經系統的基本單位,它們通過電信號和化學信號的方式進行信息傳遞。 神經元的信息傳遞方式 神經元的結構和功能 神經元
    的頭像 發表于 07-03 11:27 ?537次閱讀

    神經元神經網絡的區別與聯系

    在人工智能和機器學習的領域中,神經元神經網絡是兩個至關重要的概念。雖然它們都與人腦中的神經系統有著密切的聯系,但在實際應用和理論研究中,它們各自扮演著不同的角色。本文旨在深入探討神經元
    的頭像 發表于 07-01 11:50 ?452次閱讀

    英特爾推出Hala Point全球最大仿神經形態系統,解決AI效率問題

    英特爾實驗室神經形態運算總監Mike Davies指出,“當前AI模型訓練及部署成本增長迅速,行業亟需創新方法。因此,英特爾實驗室研發了Hala P
    的頭像 發表于 04-23 10:00 ?352次閱讀

    英特爾最大神經形態計算機研制成功

    英特爾公司最近成功研制出了世界上最大的神經形態計算機Hala Point,這創新性的技術突破在人工智能領域引起了廣泛關注。
    的頭像 發表于 04-22 10:10 ?326次閱讀

    英特爾研發新型神經形態計算機Hala Point,為AI發展注入新動力

    科學家對神經形態計算機抱有極高期望,因其采用人工神經元實現存儲與運算功能,避免數據在組件間頻繁傳輸,從而提高能源利用效率。
    的頭像 發表于 04-19 15:47 ?256次閱讀