精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

軟硬件協同創新優化打造高性能數據庫,超聚變和英特爾做了什么?

英特爾中國 ? 來源:未知 ? 2023-07-21 18:15 ? 次閱讀

IDC近日發布的《全球數字化轉型支出指南》2023年V1版預測:到2026年,中國數字化轉型支出規模預計超過6,000億美元,五年復合增長率將達到17.9%,增速位于全球前列1。面對海量、實時、在線的數據處理需求,分布式數據庫服務及數倉服務已經成為企業數字化轉型的基礎設施之一。相比傳統架構,分布式數據庫具有更高的并發和更低的時延,可實現敏捷的擴展,幫助企業提升投資回報。但同時,隨著企業用戶的增長,以及業務的持續創新,分布式數據庫必須具備更高的性能水平,以在特定的 SLA 標準下處理數據,幫助企業應對數據爆發式增長帶來的挑戰,充分釋放數據價值。

作為國產化分布式數據庫的重要一員,超聚變數字技術有限公司(以下簡稱:超聚變)推出的 FusionDB 憑借高性能、簡單易 用、穩定高可用、安全可靠等優勢,已經在眾多行業用戶中得到成功應用。目前,基于第四代英特爾 至強 可擴展處理器的FusionDB 數據庫解決方案,進一步釋放了在加速數據處理方面的潛能。同時,英特爾與超聚變緊密合作,基于英特爾 Open Analytic Toolkit 和英特爾 Quick Assist(英特爾 QAT)等技術對 FusionDB 數據庫進行了優化,解決了數據庫在加速優化索引訪問性能、物理備份性能、備份存儲空間占用以及總體擁有成本等方面面臨的瓶頸,打造了高性能數據庫系統,為用戶提供了流式、實時、離線、在線數據聚合等靈活的混合分析能力。

wKgZomToEiiAVungAADWQdBO_o4798.gif

第四代英特爾 至強 可擴展處理器
及內置加速器
提供算力基座

wKgZomToEiiAVungAADWQdBO_o4798.gif

為解決上述性能挑戰,進一步增強 FusionDB 數據庫的性能優勢,超聚變與英特爾從硬件升級、軟件優化等多方面進行了深入合作,打造了極具性能的分布式數據庫解決方案。

在硬件層面,超聚變選擇了搭載第四代英特爾 至強 可擴展處理器的數據庫服務器作為基礎驗證平臺。第四代英特爾 至強 可擴展處理器通過創新架構增加了每個時鐘周期的指令,每個插槽多達 60 個核心,支持 8 通道 DDR5 內存,有效提升了內存帶寬與速度,并通過 PCIe 5.0(80 個通道)實現了更高的 PCIe 帶寬提升。第四代英特爾 至強 可擴展處理器提供了出色性能和安全性,可根據用戶的業務需求進行擴展。

此外,第四代英特爾 至強 可擴展處理器內置了多個加速器,諸如英特爾 In-Memory Analytics Accelerator(英特爾 IAA)、英特爾 高級矩陣擴展(英特爾 AMX)、英特爾Data Streaming Accelerator(英特爾 DSA)、英特爾 QAT 等高級硬件能力,能夠加速AI、數據分析、數據加解密等場景下的處理能力,滿足用戶的多樣化算力需求(圖1)。

wKgZomToEiiAPDyaAAJMW_d9cE4096.png圖1:第四代英特爾 至強 可擴展處理器為數據中心提供多種優勢wKgZomToEiiAVungAADWQdBO_o4798.gif

協同開展軟件優化
輕松突破索引訪問、端到端備份性能瓶頸

wKgZomToEiiAVungAADWQdBO_o4798.gif

  • 英特爾 Open Analytic Toolkit優化布隆索引訪問性能

數據庫 Postgres 內核默認使用 B-Tree 索引,但為了提升 FusionDB的索引性能,超聚變首先使用布隆索引替代 B-Tree 索引,實現了一定的性能提升。為進一步優化布隆索引的訪問性能,超聚變通過英特爾 Open Analytic Toolkit 應用了 AVX512 這一重要特性,以使用處理器的單指令多數據 (SIMD) 指令對索引過程進行矢量化,從而優化性能。英特爾 高級矢量擴展 512(英特爾AVX-512)是一套創新的指令集,提升了指令的吞吐能力,能夠更好地應對龐大的數據量以及數據庫中高維數據所帶來的性能壓力。

在實際優化過程中,超聚變利用英特爾 AVX-512 的矢量化方式,對 FusionDB 數據庫中創建索引和索引查詢的過程進行加速。在創建索引的過程中重點解決了數據哈希矢量化問題,從而實現了并行生成每列數據的布隆位圖。在索引查詢過程中實現了多路并行的布隆位圖比較,并支持變長布隆位圖。超聚變針對 FusionDB 數據庫索引執行時間測試的數據顯示(圖2),在啟用英特爾 AVX-512 之后,索引性能最高提升1.67倍2

wKgZomToEiiAQDEYAAAvwoTEu-I591.png圖2:布隆索引訪問性能比較3
  • 英特爾 QAT幫助提升物理備份性能,大幅節約空間

物理備份是分布式數據庫的一個常用場景,為了提升備份效率,超聚變對于 FusionDB 數據庫備份緩存機制進行了優化,將備份緩存從 8kb 頁面調整為 64kb 頁面,從而降低了緩存的增量,提高了吞吐率,更有效地發揮資源性能,大幅提升了全量備份和增量備份等性能。

為了進一步提升 FusionDB 數據庫備份效率,超聚變利用英特爾QATzip 對于 FusionDB 數據庫 gs_probackup 中原有的緩存機制進行優化,在保證前向兼容的前提下,添加可通過參數配置大小的物理備份緩存,使得 CPU 能力得到充分的發揮,進一步提升了全量備份和增量備份性能(圖3)。英特爾 QAT 是英特爾面向高性能安全性、私鑰保護和壓縮/解壓縮等場景推出的一個硬件加速技術,能夠將相關負載從 CPU卸載到 QAT 中,有效提升應用程序和平臺的性能。第四代英特爾 至強 可擴展處理器集成了英特爾 QAT4.0,能夠更進一步釋放在私鑰保護和壓縮/解壓縮等場景的性能優勢。

wKgZomToEiiAea1gAAA2gp0B6As521.png圖3:備份速率比較4

此外,超聚變還對比了當 NVMe 盤緩存大小均為 256KB,全量備份數據量均為 102 GB,并發數為 4 時的 QAT 與 lz4 壓縮性能比較。測試數據顯示,英特爾 QATzip 均能夠有效提升數據壓縮效率,提升數據備份恢復速度(圖4)。在使用英特爾 QATzip 之后,FusionDB 數據庫可以實現 50%5左右的壓縮率,進一步降低了對于存儲空間的占用,有助于降低存儲成本,提升數據庫系統的投資回報率。

wKgZomToEiiARne2AAAlPo2z7W0058.png圖4:QATzip/ lz4 壓縮算法的性能對比6wKgZomToEiiAVungAADWQdBO_o4798.gif

全面賦能
超聚變FusionDB數據庫優勢顯著

wKgZomToEiiAVungAADWQdBO_o4798.gif

超聚變與英特爾的深度合作,解決了 FusionDB 數據庫面臨的多個瓶頸,在布隆數據索引、端到端文件備份等場景中提升了數據庫的性能表現,助力超聚變FusionDB 數據庫以更優的性能、穩定性、可用性為用戶提供服務。

首先,通過采用第四代英特爾 至強 可擴展處理器并使用英特爾Open Analytic Toolkit 進行軟件優化,FusionDB 數據庫能夠加速索引訪問速度,更有效地應對大規模業務在吞吐、時延方面的挑戰,提升業務服務能力,高效支撐性能敏感型業務。

第二,通過利用英特爾 QAT 加速,FusionDB 數據庫可縮短備份恢復時間,降低業務遷移成本,減少業務備份中斷時間,同時還可通過英特爾 QAT 硬件引擎卸載 CPU 的壓縮任務,降低對系統性能的影響。

第三,在使用英特爾 QAT 加速壓縮之后,FusionDB 數據庫實現了更高的壓縮率,有助于節省存儲空間,降低支出。此外,超聚變提供了基于第四代英特爾 至強 可擴展處理器的 FusionDB 數據庫一體機解決方案,能夠實現更深入的集成與優化,可以幫助客戶降低部署與調優的時間成本。

在各行各業廣泛開展數字化轉型的背景下,英特爾致力于為用戶提供不同場景的解決方案。基于第四代英特爾 至強 可擴展處理器及其內置加速器,用戶可以在 AI、分析、云和微服務、網絡、數據庫、存儲等類型的工作負載中獲得優化的性能。通過與強大的生態系統相結合,第四代英特爾 至強 可擴展處理器能夠幫助用戶構建更加高效、安全的數據中心基礎設施,助力企業數字化轉型。

資料援引:1 更多信息請見https://www.idc.com/getdoc.jsp?containerId=prCHC50855923

2,3 數據援引自超聚變和英特爾于 2023 年 4 月聯合進行測試的結果。測試配置:主節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,256 GB 總內存 (8*32 GB),2*SSD (480 GB) + 2*NVMe(1.92 TB);備節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,128 GB 總內存 (4*32 GB),2*SSD (480 GB) + 2*NVMe (1.92 TB)。英特爾并不控制或審計第三方數據。請您審查該內容,咨詢其他來源,并確認提及數據是否準確。實際性能受使用情況、配置和其他因素的差異影響。更多信息請見 www.Intel.com/PerformanceIndex

4,5,6 數據援引自超聚變和英特爾于 2023 年 4 月聯合進行測試的結果。測試配置:主節點 — 雙路英特爾 至強 鉑金 8480 處理器,56 核,7.3 TB NVMe;備節點 — 雙路英特爾 至強 鉑金 8480處理器,56 核,1.8 TB NVMe。英特爾并不控制或審計第三方數據。請您審查該內容,咨詢其他來源,并確認提及數據是否準確。實際性能受使用情況、配置和其他因素的差異影響。更多信息請見 www.Intel.com/PerformanceIndex


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    60

    文章

    9888

    瀏覽量

    171532
  • cpu
    cpu
    +關注

    關注

    68

    文章

    10826

    瀏覽量

    211160

原文標題:軟硬件協同創新優化打造高性能數據庫,超聚變和英特爾做了什么?

文章出處:【微信號:英特爾中國,微信公眾號:英特爾中國】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    英特爾與百度共同為AI時代打造高性能基礎設施

    2024年9月25日,北京 ?——?在2024百度云智大會上,英特爾應邀出席并披露基于英特爾?至強?6處理器的新一代云實例即將在百度智能云上推出,分享雙方在云數據中心、大模型軟件服務與生態以及
    的頭像 發表于 09-27 09:48 ?248次閱讀
    <b class='flag-5'>英特爾</b>與百度共同為AI時代<b class='flag-5'>打造</b><b class='flag-5'>高性能</b>基礎設施

    英特爾IT的發展現狀和創新動向

    AI大模型的爆發,客觀上給IT的發展帶來了巨大的機會。作為把IT發展上升為戰略高度的英特爾,自然在推動IT發展中注入了強勁動力。英特爾IT不僅專注于創新、AI和優化,以及
    的頭像 發表于 08-16 15:22 ?516次閱讀

    基于英特爾至強6能效核處理器優化原生分布式數據庫OceanBase

    隨著數字化、在線化、智能化的演進,企業面臨著指數級遞增的海量存儲需求和挑戰,同時,企業需要降本增效,進行更好更智能的數據決策。基于英特爾 至強 6 能效核處理器的分布式數據庫OceanBase在
    的頭像 發表于 07-24 15:16 ?463次閱讀
    基于<b class='flag-5'>英特爾</b>至強6能效核處理器<b class='flag-5'>優化</b>原生分布式<b class='flag-5'>數據庫</b>OceanBase

    英特爾軟硬件構建模塊如何幫助優化RAG應用

    深入研究檢索增強生成 (Retrieval Augmented Generation, RAG),該創新方法定義了企業和機構如何利用大語言模型(LLM)來發揮其數據的價值。本文將探索若干英特爾
    的頭像 發表于 07-24 15:12 ?385次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>軟硬件</b>構建模塊如何幫助<b class='flag-5'>優化</b>RAG應用

    東軟睿馳與瑞薩電子達成合作伙伴關系,強化汽車軟硬件協同創新

    卓越的SDV(軟件定義汽車)整體產品解決方案與服務供應商東軟睿馳與全球半導體解決方案供應商瑞薩電子(TSE:6723)今日在北京車展現場簽署了戰略合作備忘錄,強化汽車軟硬件協同創新
    的頭像 發表于 04-26 09:55 ?794次閱讀
    東軟睿馳與瑞薩電子達成合作伙伴關系,強化汽車<b class='flag-5'>軟硬件</b><b class='flag-5'>協同創新</b>

    Intel Vision 2024大會: 英特爾發布全新軟硬件平臺,全速助力企業推進AI創新

    發布AI開放系統戰略,展示與新客戶、合作伙伴跨越AI各領域的合作。 新聞亮點 ?英特爾發布了為企業客戶打造的全新AI戰略,其開放、可擴展的特性廣泛適用于AI各領域。 ?宣布面向數據中心、云和邊緣
    的頭像 發表于 04-12 14:52 ?495次閱讀
    Intel Vision 2024大會: <b class='flag-5'>英特爾</b>發布全新<b class='flag-5'>軟硬件</b>平臺,全速助力企業推進AI<b class='flag-5'>創新</b>

    英特爾銳炫A系列顯卡為客戶提供了強大的性能和靈活性

    在當今快速發展的邊緣計算和人工智能領域,英特爾憑借其創新軟硬件解決方案,為客戶提供了強大的性能和靈活性。其中,推出的英特爾銳炫 A 系列顯
    的頭像 發表于 03-22 15:17 ?482次閱讀
    <b class='flag-5'>英特爾</b>銳炫A系列顯卡為客戶提供了強大的<b class='flag-5'>性能</b>和靈活性

    借助英特爾DLB技術優化網絡性能

    英特爾? DLB技術的出現,無疑為數據處理和網絡傳輸領域帶來了一場革命性的變革。通過其獨特的負載均衡、數據包調度優先排序以及降低網絡流量時延的能力,英特爾? DLB顯著提升了高
    的頭像 發表于 03-11 09:52 ?580次閱讀

    英特爾 DLB 的硬件實施方案加速數據傳輸

    英特爾 動態負載均衡器(英特爾 DLB)是全新英特爾 至強 可擴展處理器中內置的一款加速器,可提高網絡、在線游戲、金融交易以及入侵檢測和防御系統的性能
    的頭像 發表于 03-09 16:34 ?2017次閱讀

    英特爾發布創新軟硬件產品,為5G核心網絡注入強勁動力

    英特爾?基礎設施電源管理器軟件可額外節能30%以上。 最新消息:為滿足網絡運營商對于提升能效的需求,英特爾公司公布了兩則重大消息,旨在降低5G核心網的功耗和總體擁有成本:一是展示了代號為Sierra
    的頭像 發表于 02-28 12:05 ?368次閱讀

    英特爾至強處理器優化升級,助力打造未來高能效數據中心

    %。與此同時,英特爾還對該處理器進行了大量優化,以滿足日益增長的AI算力需求。 該適用于企業級服務器的英特爾高端CPU受到了眾多行業專家們的好評。 ?第五代至強可擴展處理器:優異的迭代性能
    的頭像 發表于 02-26 17:39 ?677次閱讀

    是德科技與英特爾攜手完成負載均衡單節點2100萬連接新建性能測試

    2024年1月18日,是德科技(Keysight Technologies,Inc.)與英特爾攜手完成負載均衡產品單節點2100萬連接新建性能測試。英特爾提供軟硬件結合
    的頭像 發表于 01-18 14:11 ?573次閱讀
    是德科技與<b class='flag-5'>英特爾</b>攜手完成負載均衡單節點2100萬連接新建<b class='flag-5'>性能</b>測試

    H3C UIS融合方案采用第五代英特爾至強可擴展處理器

    融合是軟件定義時代,企業構建基礎設施的卓越選擇。受益于第五代英特爾 至強 可擴展處理器的性能優勢,我們增強了 H3C UIS 融合方案在數據庫
    的頭像 發表于 01-13 10:54 ?1301次閱讀
    H3C UIS<b class='flag-5'>超</b>融合方案采用第五代<b class='flag-5'>英特爾</b>至強可擴展處理器

    制程架構并駕齊驅,軟件硬件雙核驅動 英特爾攜手合作伙伴兌現AI PC承諾

    處理器及其打造的AI PC,以及英特爾與操作系統廠商、獨立軟件開發商獨立硬件開發商等合作伙伴在PC軟硬件方面的創新,進行了更加深入和細致的分
    的頭像 發表于 01-10 11:11 ?326次閱讀
    制程架構并駕齊驅,軟件<b class='flag-5'>硬件</b>雙核驅動 <b class='flag-5'>英特爾</b>攜手合作伙伴兌現AI PC承諾

    第五代英特爾? 至強? 可擴展處理器助力星環科技分布式向量數據庫 Transwarp Hippo 實現大幅性能提升

    與上一代產品相比,第五代英特爾 至強 可擴展處理器實現了令人驚喜的性能提升,能夠有助于進一步釋放星環科技分布式向量數據庫 Transwarp Hippo 的性能潛力,為用戶帶來強大的向
    的頭像 發表于 12-16 16:15 ?450次閱讀
    第五代<b class='flag-5'>英特爾</b>? 至強? 可擴展處理器助力星環科技分布式向量<b class='flag-5'>數據庫</b> Transwarp Hippo 實現大幅<b class='flag-5'>性能</b>提升