當前位置: 華文世界 > 科技

RapidsDB全國產ARM申威平台最新測試結果炸裂!

2024-05-09科技

如果說數據要素是汽油,資料庫則是核心引擎。資料庫貫穿數據采集、儲存、處理、傳輸、交換、銷毀等全生命周期,實際套用中效能問題十分關鍵。柏睿數據最新發表的RapidsDB MOXE TPCH測試報告,在華為鯤鵬ARM架構伺服器上RapidsDB展現出碾壓ClickHouse的效能優勢,引起全球知名中文IT技術交流平台CSDN、知名的數位化人才學習平台和技術社群51CTO等業界廣泛關註。

以下內容轉載自CSDN平台

隨著【" 數據要素 × " 三年行動計劃】【企業數據資源相關會計處理暫行規定】等政策的出台落地,數據要素正在極大地推動生產力的發展和變革。海量數據資產如何實作高效的數據處理和分析成為當下企業必須格外重視的問題。資料庫作為數位化和資訊化的發展基石,選擇一款高效能的資料庫已成為企業邁向成功的關鍵一步。在高效能資料庫技術選型中,國產資料庫RapidsDB與開源界的佼佼者ClickHouse的對比由來已久。


RapidsDB是柏睿數據自研的新一代極速全場景分布式記憶體架構分析型資料庫,用於企業建立即時數據分析與海量數據高效管理平台。ClickHouse 是Yandex開源的用於即時數據分析的一款高效能列式分布式資料庫。兩者同樣以線上分析(OLAP)查詢作為主要場景,同樣以閃電般的查詢速度和效能著稱。RapidsDB還是ClickHouse,在行業套用落地的場景中確實是一個值得考慮的問題。但在實際套用中,RapidsDB憑借十年磨一劍的不斷創新和持續最佳化,正在逐漸展現出其獨特的優勢。

不考慮軟體國產化等因素,單純從技術角度而言,實實在在的測試數據更能驗證資料庫自主創新的水準。到底誰才是為OLAP量身打造的高效能資料庫?最新發表的RapidsDB MOXE TPCH測試報告,揭示RapidsDB如何與ARM 環境完美適配,並在效能上全面碾壓ClickHouse,成為企業國產化數位化轉型的強力引擎。

01

測試環境的公平對比

為確保測試結果的公正性和準確性,所有測試在相同的硬體配置條件下進行。RapidsDB與ClickHouse都部署在了擁有相同計算能力和儲存空間的伺服器上(硬體參數見表1)。包括Inspur (X86)、Huawei Kunpeng (ARM)以及申威SW3231(SW64)三種伺服器配置,均配備了高效能的處理器、大容量的記憶體和快速的儲存裝置。這種測試環境的設計為探索兩款資料庫在實戰中的真實效能提供了堅實基礎。

02

數據載入速度的顯著優勢

數據載入速度代表著資料庫對海量數據的處理能力,也是衡量資料庫效能的重要指標。在基於華為鯤鵬ARM的測試中,RapidsDB展現了令人矚目的速度優勢。在載入100GB TPC-H數據集時,RapidsDB的表現遠超ClickHouse,僅用了 451.73秒,而ClickHouse則需要長達1900秒(見表2)。這不僅證明了RapidsDB在數據處理上的高效率,也展示了其強大的數據處理能力。


03

查詢執行效能的全面領先

查詢效能代表著資料庫用多快的速度處理SQL語句,是資料庫效能的重中之重,也是此次比較的核心。在ARM環境中,無論是100GB還是300GB的數據規模,RapidsDB的查詢執行時間都遠遠低於ClickHouse。具體來說,在100GB數據規模的測試中,RapidsDB完成所有查詢的總耗時僅為802.07秒,而ClickHouse則需要4027.01秒 。RapidsDB比ClickHouse整整快了 5倍 。這一顯著的差距不僅彰顯了RapidsDB在查詢最佳化和執行效率方面的卓越表現,也說明了其在處理大規模數據集時的強大能力。


04

記憶體使用效率的最佳化

在現代資料庫系統中,高效的記憶體使用和資料壓縮技術對於提升系統效能至關重要。RapidsDB在這兩方面都展現了其技術優勢。對比ClickHouse,RapidsDB能夠更加高效地利用記憶體資源,並透過先進的資料壓縮技術顯著提高數據儲存和查詢的效率。這不僅能夠為企業節省寶貴的儲存空間,還能在處理復雜查詢時保持快速響應,大大提升使用者體驗。

05

面向未來的技術布局

除了在效能測試中取得顯著成果,RapidsDB還展現了其面向未來的技術布局能力。與ClickHouse相比,RapidsDB不僅關註當前的效能最佳化,還積極探索如何利用最新技術,如人工智慧和大數據分析,以滿足未來企業對數據處理的更高要求。前瞻性的技術戰略使RapidsDB在競爭激烈的資料庫市場中成為企業數位化轉型道路上的堅實夥伴。

總而言之,透過深入分析RapidsDB MOXE TPCH測試報告,我們可以看到RapidsDB和ARM架構的無縫適配,並在數據載入速度、查詢執行時間以及記憶體使用效率等多個關鍵效能指標上均展現出對ClickHouse的碾壓式優勢。尤為突出的是效能核心的查詢執行時間,RapidsDB比ClickHouse整整快了5倍。

當前,ARM 已成為X86之外最主要的架構,高通、博通、三星電子、輝達等多家芯片開發商投身到ARM伺服器芯片的開發。ARM伺服器在國內大數據中心及雲服務基礎建設中發揮著越來越重要的作用。但ARM的優勢不在於效能強大而在於效率,RapidsDB在ARM架構伺服器上優秀的效能表現,無疑為ARM生態補上效能短板,為海量數據要素的套用流通打下重要基石。

作為一款國產資料庫技術的佼佼者,RapidsDB不僅展現了其在大數據處理方面的強大能力,也為國內外企業提供了一個高效、可靠的資料庫解決方案。在企業數位化轉型的道路上,RapidsDB為企業帶來速度與效率,也開啟了未來的無限可能。