當前位置: 華文世界 > 科技

睿帆科技雪球數據庫助力北京移動構建營運商數據中心即時數倉

2024-03-31科技

營運商O域數據中心承擔著在網絡執行維護過程中采集、處理各環節資訊,從而為網絡規劃、器材執行、業務發展等多方面提供決策支持的任務,是營運商業務支撐的關鍵系統之一。隨著營運商信令類數據量的迅速增長、資料來源種類的變化和使用者日益增長的通訊需求,數據中心對數據庫的即時性、可用性、安全性等能力提出了更高的要求。

為進一步最佳化平台架構、提升O域數據處理能力與管理水平,北京移動2022年開始啟動數據共享平台能力最佳化專案,專案引入睿帆科技雪球數據庫Snowball替換原有數據庫,構建營運商數據中心即時數倉,為數據中心提供全面的數據庫服務支撐。

國產創新,深入核心

雪球數據庫Snowball是一款睿帆科技自主研發的支持PB級數據量的、高並行的OLAP數據庫管理系統,具備高可用、高效能、高容錯等特性。優於傳統數據庫10倍以上的超快查詢速度、每秒數百萬行的超強寫入效能與1000節點以上的超強擴充套件性,使得雪球數據庫Snowball不僅滿足超大規模數據量下對查詢效能要求極其苛刻的套用場景,更是構建大規模、即時資料倉儲的核心基石。

憑借睿帆科技在營運商領域深耕近10年的經驗和對營運商業務技術的深厚積累,雪球數據庫Snowball已成功服務全國超過半數省份的營運商使用者,在多個營運商核心系統持續平穩執行多年,因此成為本次北京移動的首選產品。

平滑替代,全面升級

在本次改造前,北京流動數據中心一直使用的是Hbase。作為成熟分布式儲存系統之一,HBase雖然具備高可靠、高效能、可伸縮的優勢,但在使用過程中也存在著查詢時延大、查詢模式單一、運維復雜等難題,很難滿足北京流動數據多維及時分析要求。

要完成本次國產數據庫產品的替換,不僅需要在功能、安全性、穩定性上達到原有Hbase水平,還要具備快速查詢的能力,滿足北京移動各級人員存取和相關重點套用數據計算需求;在效能和容量上,更要同時滿足數據即時處理和海量儲存的需求。

歷時數月,經過多輪測試,睿帆團隊在不影響原系統架構和邏輯的前提下,依托與原庫的極致相容性,準確、高效、低風險地將原庫數據無失真移植到雪球數據庫Snowball,並進一步完成多項能力的擴充套件與提升:

  1. 不僅支撐了海量數據入庫查詢這類通用場景,還擴充套件了即席分析、即時數據合成、即時數據匯聚等多種業務能力,沈澱了即時數倉的構建能力,提升了營運商數據中心專案中模型計算的及時性;

  2. 在保障現網業務穩定性的前提下,先後完成了大吞吐入庫的效能提升最佳化、查詢介面的相容性適配、數據查詢效率最佳化、數據合成演算法的計算效能最佳化、告警數據入庫及時性的最佳化等多項最佳化內容;

  3. 透過在雪球數據庫Snowball中使用小批次關聯計算,實作了VoLTE話單的多介面關聯,將原有的關聯合成時延從2小時提升至10分鐘,並最終實作了15分鐘粒度的核心網問題的異常定位能力。

平穩執行,賦能一線

截至今年,雪球數據庫Snowball已在北京流動數據共享平台上線執行近兩年,穩定、高效地支撐起O域數據中心各項任務,在效率提升、成本控制、客戶感知等方面成效顯著:

  1. 提升一線工作效率:在完成VoLTE xdr從Hbase向雪球數據庫Snowball的遷移後,基於VoLTE的多維查詢提數效率顯著提升,SQL查詢時間縮短80%以上,從原本的幾小時縮短到幾分鐘,有效提升業務人員工作效率;

  2. 降低軟硬件成本:雪球數據庫Snowball的引入提升了營運商數據中心專案中模型計算的及時性,節省了伺服器硬件的投入,並實作綜合節省資源30%。

  3. 提升客戶感知:為客戶滿意度分析、業務感知指標分析提供數據與算力支持,間接協助提升客戶感知。

近年來,雪球數據庫Snowball持續服務營運商、軌交、政務等各行業數碼化轉型升級,憑借高效能、可靠性、易用性等贏得北京移動、四川移動、廣州公安等眾多客戶認可。未來,睿帆科技將繼續加強研發投入和自主創新,加速推動雪球數據庫Snowball叠代升級與重點行業典型場景套用落地,以高水平科技創新賦能千行百業高質素發展。