精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

酷睿輕薄本也能運行大語言模型,英特爾推動 PC 生成式 AI 落地

looger123 ? 來源:looger123 ? 作者:looger123 ? 2023-08-25 09:26 ? 次閱讀

IT之家8 月 24 日消息,2023 年 8 月 18 日上午,英特爾在大灣區舉辦了一場技術分享會,主題是英特爾在 AIGC(人工智能生成式計算)領域的最新進展。會上,英特爾的技術專家向與會者展示了他們在 AIGC 上的技術方向,并進行了多個應用的演示。

首先,英特爾介紹了他們在大語言模型方面的優化和支持。在我們傳統的認知里,運行類似 ChatGPT 這種大語言模型必須要有大顯存的顯卡支持。但這場交流會卻顛覆了我們的認知。英特爾為了讓 12、13代酷睿平臺也能夠順利運行各種大語言模型并提供流暢的使用體驗,構建了 BigDL-LLM 庫。通過這個庫,可以對各種大語言模型進行優化和支持,包括一些開源的、可以在本地運行的大語言模型。這個庫甚至可以在一臺搭載 16GB 內存的英特爾輕薄本的機器上運行參數量高達 16B 的大語言模型。此外還支持 LLaMA / LLaMA2、ChatGLM / ChatGLM2 等多個大語言模型。

接下來,英特爾展示了他們在大語言模型應用方面的表現。通過集成了 ChatGLM2、LLaMA2 和 StarCoder 這三個大語言模型的 Demo,他們演示了這些模型在中文和英文應用上的表現。通過優化和量化操作,這些大語言模型在生成回答時能夠以非常快的速度生成,并且不影響閱讀體驗。英特爾已經發布了這套 Demo,任何搭載 12、13代酷睿的電腦都可以直接安裝并體驗。

我們這里選擇了一臺通過英特爾Evo平臺認證的輕薄本:華為 MateBook 16s 來進行測試。處理器為酷睿 i9-13900H + 32G 內存,看看在核顯輕薄本上究竟能不能跑 AIGC。

英特爾大語言模型的 Demo 安裝過程非常傻瓜,英特爾已經打包成了 EXE 文件,安裝并導入.Bin 格式的大語言模型就可以運行了。打開界面我們可以看到左側可以選擇聊天內容、調整模型參數和查看運算延遲,右側則是聊天框。

wKgaomToAy6APZN-AAD3K3E2GZE492.png

筆者先嘗試問了他一些人情世故方面的問題,沒想到回答非常出色,響應速度也很快。這樣一個問題只花了 658.87ms 就完成了響應。

wKgZomToAy-AZijhAAK_uxoFikA008.png

在運算過程中我們可以看到,i9-13900H 占用率達到了 100%,內存占用達到了 16G,Xe 核顯也有一定占用。看來這個運算過程確實是在本地進行的。經過英特爾不斷的優化和 13代酷睿處理器算力的提升,我們真的在輕薄本上實現了 AIGC 的落地。

wKgaomToAy-AA8nCAADZ5jTDLt0978.png

在情感分析功能中,我們讓大語言模型分析了一段經典散文。可以看到雖然分析的角度比較淺顯,但沒有邏輯錯誤,還是可以自洽的。

wKgZomToAy-AUDnYAAR8sEEjX9k713.png

而在這個中文翻譯功能中,英特爾大語言,模型的表現就更加令我意外了,它的翻譯質量相當高,速度也很快。哪怕是有如此多專有名詞的稿件,也能準確無誤地翻譯。

wKgaomToAzCAWZR-AAQvkh6HHSM181.png

在故事創作方面,這套大語言模型也展現出了令我驚訝的邏輯能力和創造能力。我這邊讓它寫一篇關羽大戰林黛玉,最后林黛玉取勝的故事。但 AI 居然認識到了這兩人根本不是一個時代的,最后寫了一個穿越時空的戲碼,雖然漏洞百出,但大體上沒有問題。

wKgZomToAzCAZ8eVAARce_HOUD4171.png

生成大綱功能則是一個非常有用的功能,我們只要輸入想要撰寫的稿件,就能幫我們列出一套邏輯清晰的稿件大綱了。這對于經常需要寫文章的群體來說能起到很好的輔助作用。

wKgaomToAzGAQ_OtAAIodgQOTzA339.png

信息提取功能對于經常需要閱讀報告的群體來說很有幫助。可以快速從長篇文章中提取核心信息。我這邊嘗試讓 AI 從英文文章中提取中文信息,效果卻依然非常好。

wKgZomToAzGABOe5AARn_cviFiY339.png

最后,筆者讓 AI 給出一份青島美食建議和青島旅游建議。由于這個大語言模型是完全離線運行的,所以給到的信息也會比較陳舊,但單從撰寫水平來看還是不錯的。

wKgaomToAzKAEZ2UAAPeMSbjK24867.png

wKgZomToAzKASNTOAAM9pewLIeQ798.png

除了大語言模型應用外,英特爾還展示了在 AI 文生圖算法 Stable Diffusion 上的支持。他們啟用了 OpenVINO 的加速,開發了一套 AI 框架,通過一行代碼的安裝,就可以加速 PyTorch 模型的運行。通過 Stable Diffusion 的 WebUI,可以在集成顯卡和 Arc 獨立顯卡上運行 Stable Diffusion Automatic1111。通過演示,可以看到在 Evo 輕薄本和搭載 i7-13700H 處理器的機器上,Stable Diffusion 在集成顯卡上的表現效果。96EU 版本的英特爾銳炬 Xe 顯卡強大的算力,可以支持 Stable Diffusion 軟件上運行 FP16 精度的模型,快速生成高質量圖片。

同時,他們還展示了在搭載 i7-13700K CPU + Arc A770 獨顯的機器上運行 Stable Diffusion 的效果,速度非常快。

此外,英特爾還展示了基于 Arc 顯卡的人物動作的三維數字重建技術。通過 Arc 強大的算力和 OpenVINO 框架對 AI 算法的優化推理,可以實時探測和重建人物動作,并進行后期渲染。這項技術不需要智能穿戴設備,只需連接家用攝像頭,即可實現實時探測和重建人物動作,并通過數字人的形象進行動畫渲染。通過實時的骨骼點信息和 3D 重建,數字人可以展現出靈活多樣的肢體動作,實現真實的三維動效。同時,根據用戶的需求,可以自定義渲染器的畫風,快速打造各種元宇宙應用。

在最后的渦輪卡展示環節,英特爾展示了他們新的渦輪 GPU 卡,Arc A770 16G。這張卡具有雙槽全長全高的設計,適應各種邊緣側服務器機箱或設備機箱。它采用渦輪風扇設計,減少對機箱內流場的干擾,更適合多卡混合計算的服務器、煉丹爐場景。

wKgZomToAzSAeHmWAAIGGO30mfg71.jpeg

從本次分享會看來,英特爾一直著力于發展 AI 技術,特別是當下火熱的 AIGC 領域,英特爾也沒有缺席。憑借 13代酷睿強勁的算力和不斷的算法優化,現在即便是輕薄本也可支持大語言模型的本地運行。而在 Arc 顯卡的加持下,Stable Diffusion 文生圖的支持也在不斷開展。同時,英特爾也在探索 AI 的下一代應用場景,并為企業級用戶提供算力更強的解決方案。

wKgaomToAzSAFiKpAAG2d-U6IlA19.jpeg

通過這些技術的展示,英特爾向大家展示了他們在 AIGC 領域的領先地位和不斷創新的能力。他們致力于為用戶提供更智能、高效的計算體驗,推動人工智能技術的發展和應用。隨著技術的不斷進步和完善,我們可以期待在未來看到更多來自英特爾的 AIGC 應用和解決方案。


審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    60

    文章

    9900

    瀏覽量

    171550
  • 酷睿
    +關注

    關注

    2

    文章

    429

    瀏覽量

    36422
  • AI
    AI
    +關注

    關注

    87

    文章

    30239

    瀏覽量

    268478
  • 語言模型
    +關注

    關注

    0

    文章

    508

    瀏覽量

    10247
  • AIGC
    +關注

    關注

    1

    文章

    357

    瀏覽量

    1512
收藏 人收藏

    評論

    相關推薦

    英特爾加速AI PC發展,預計到2028年占據80%市場份額

    英特爾中國區董事長王銳近日透露了公司未來的重要發展計劃。她表示,自英特爾Ultra處理器發布以來,其卓越的性能已吸引了大量設備制造商的青睞,目前已有800萬臺設備搭載了這款處理器。
    的頭像 發表于 06-18 16:26 ?464次閱讀

    已有超過500款AI模型英特爾Ultra處理器上得以優化運行

    近日,英特爾宣布在全新英特爾 Ultra處理器上,有超過500款AI模型得以優化
    的頭像 發表于 05-11 09:31 ?684次閱讀

    英特爾Ultra處理器突破500個AI模型優化

    英特爾在最新推出的英特爾? ? Ultra處理器上宣布,超過500款AI模型已得到優化
    的頭像 發表于 05-09 11:18 ?739次閱讀

    英特爾二季度對Ultra處理器供應受限

    英特爾首席執行官帕特·基辛格在最新的財報電話會議上透露,受晶圓級封裝產能限制,二季度Ultra處理器的供應將面臨挑戰。隨著AI PC需求
    的頭像 發表于 05-06 11:04 ?638次閱讀

    英特爾AI產品助力其運行Meta新一代大語言模型Meta Llama 3

    英特爾豐富的AI產品——面向數據中心的至強處理器,邊緣處理器及AI PC等產品為開發者提供最新的優化,助力其運行Meta新一代大
    的頭像 發表于 04-28 11:16 ?585次閱讀

    英特爾澎湃動力驅動商用AI PC,打造AI+時代的新質生產工具

    近日,英特爾舉辦了“2024全新英特爾商用客戶端AI PC產品發布會”,將基于英特爾
    的頭像 發表于 04-02 10:12 ?415次閱讀

    浪潮信息"源2.0"大模型YuanChat支持英特爾最新商用AI PC

    % 。企業可以在全新的英特爾商用客戶端AI PC上,使用AI PC模型效率工具"YuanCha
    的頭像 發表于 03-27 22:52 ?465次閱讀
    浪潮信息&quot;源2.0&quot;大<b class='flag-5'>模型</b>YuanChat支持<b class='flag-5'>英特爾</b>最新商用<b class='flag-5'>AI</b> <b class='flag-5'>PC</b>

    英特爾Ultra通過全新英特爾vPro平臺將AI PC惠及企業

    近日,英特爾在2024年世界移動通信大會(MWC 2024)上宣布,全新英特爾?vPro?平臺將AI PC的優勢惠及商用客戶。
    的頭像 發表于 03-18 15:07 ?478次閱讀

    英特爾推出全新vPro平臺,將AI PC的優勢延伸至商用領域

    在2024年世界移動通信大會(MWC 2024)上,英特爾宣布了其全新英特爾?vPro?平臺的發布,旨在將AI PC的先進功能帶給商用客戶。這一平臺結合了內置
    的頭像 發表于 03-03 15:47 ?1115次閱讀

    英特爾vPro讓AI PC造福企業

    的優勢惠及商用客戶。內置英特爾銳炫? GPU的英特爾?? Ultra處理器和英特爾??
    的頭像 發表于 02-28 16:01 ?343次閱讀

    成都匯陽關于成英特爾推出多款新品,24 年或成為 AI PC 出貨元年

    和 65W 主流第 14 代芯片,而定位 55W 功耗的第 14 代HX 高性能移動處理器主要為游戲玩家和專業人士所打造,共有五款產品。 此外,
    的頭像 發表于 01-18 10:10 ?585次閱讀

    AI PC釋放開發創意,英特爾人工智能創新應用大賽火熱報名中!

    ? ? ? ?視頻摳像、智能剪輯、人物追蹤、語音降噪、背景模糊與替換、音樂創作、智慧辦公、運行本地130億參數大模型、智能交互的數字藝術、實時生成數字人… ? ? ? ?在
    的頭像 發表于 12-29 14:05 ?416次閱讀
    <b class='flag-5'>AI</b> <b class='flag-5'>PC</b>釋放開發創意,<b class='flag-5'>英特爾</b>人工智能創新應用大賽火熱報名中!

    開啟AI PC新紀元!英特爾Ultra重磅發布,勝任200億參數大語言模型

    12月15日下午,以“AI無處不在 創芯無所不及”為主題的2023英特爾新品發布會在北京舉辦,英特爾正式推出了基于Intel4制程,采用3D封裝技術的
    的頭像 發表于 12-16 15:14 ?2299次閱讀
    開啟<b class='flag-5'>AI</b> <b class='flag-5'>PC</b>新紀元!<b class='flag-5'>英特爾</b><b class='flag-5'>酷</b><b class='flag-5'>睿</b>Ultra重磅發布,勝任200億參數大<b class='flag-5'>語言</b><b class='flag-5'>模型</b>

    英特爾發布新一代移動端處理器——Ultra系列

     在12月7日的聯想集團“AI PC 產業創新論壇”上,英特爾中國區技術總經理高宇透露,新一代 Ultra 處理器已經適配了超過10款中
    的頭像 發表于 12-14 17:14 ?1782次閱讀

    英特爾新處理器,掀AI PC戰火

    隨著ai時代的到來,英特爾正在構想新的Ultra處理器(代號Meteor Lake),這是英特爾的第一個基于npu的處理器,旨在在
    的頭像 發表于 12-11 11:26 ?943次閱讀