GBase新聞
湖倉一體的優選:GBase 8a MPP + XEOS
近日,天津南大通用數據技術股份有限公司(以下簡稱:GBASE南大通用)分布式分析型數據庫GBase 8a MPP完成了與北京星辰天合科技股份有限公司(以下簡稱:XSKY星辰天合)全協議支持的企業級對象存儲XEOS的對接測試,通過功能測試、性能測試,各項測試結果總體正常達到測試預期,兩款產品兼容性良好,滿足功能需求。
數據倉庫遭遇存儲性能及兼容性問題
隨著國產化進程的推進,國產數據庫廠商勵精圖治,經過多年對產品的打磨,國產數據庫系統已逐漸成熟,并積累了大量的客戶案例。隨著國產數據庫的推廣及越來越多的被投入到生產環境中,數據倉庫的架構被逐漸應用起來,而相關的存儲性能及兼容性問題接踵而至。
數據倉庫是在數據庫已經大量存在的情況下,為了進一步挖掘數據資源、為了決策需要而產生的。數據倉庫的建設目的,是為前端查詢和分析作為基礎,由于有較大的冗余,所以需要的存儲也較大。數據倉庫通常有以下幾個特點:
數據量過大:數據倉庫包含了由歷史數據、詳細數據和各種各樣類型的數據組成的數據。數據量龐大,對于數據的管理、索引、持久化保存都是巨大的挑戰。
文件格式多:數據倉庫其數據來源于不同外部系統,其數據也是開放給各個外部應用系統使用。因此的數倉中的數據,是按照不同的主題區分的,根據各個主題的不同會產生大量不同格式的文件。
需要長期保留:數據倉庫的數據主要供企業決策分析之用,所涉及的數據操作主要是數據查詢,一旦某個數據進入數據倉庫以后,一般情況下將被長期保留,也就是數據倉庫中一般有大量的查詢操作,但修改和刪除操作很少,通常只需要定期的加載、刷新。數據倉庫中包括了大量的歷史數據。
文件并發讀寫頻繁:由于數據倉庫是面向各個外部應用系統的,面對不同的業務系統,因此文件大小不一,并且文件需要被頻繁的訪問與讀取,頻繁的文件讀寫需要底層存儲系統提供高性能的能力。
基于以上需求,GBASE南大通用與XSKY星辰天合建立戰略合作,本次進行深度適配,根據各類業務場景,雙方對產品進行了大量的兼容性及性能測試,GBase 8a MPP數據庫側參照標準AWS S3協議規范進行商業化開發改造,XEOS對象存儲完美支持此協議,經過雙方技術人員多輪測試驗證后,達到性能及兼容性等預期目標。
XEOS對象存儲與GBASE數據庫對接說明
本次對接測試根據中移動總部云數倉項目實際需求進行制定,為后期平臺建設提供決策參考與支持。本次測試內容包括功能測試、性能測試,各項測試結果總體正常達到測試預期。
功能測試:涵蓋標準SQL、數據加載、表數據存儲分布方式、開發接口4個方面,共15個測試小項,所有功能測試項完全支持,全部通過,具體測試結果,詳細如下所示:
通過本次對功能和性能的測試,都達到了預期目標,GBase 8a MPP數據庫與XSKY企業級對象存儲XEOS相融合,系統可靠穩定運行,性能表現優異。
XEOS對象存儲產品優勢
XEOS對象存儲,是XSKY公司擁有自主知識產權、獨立開發面向多業務場景的企業級軟件定義存儲產品,其基于國產CPU、國產操作系統及應用進行了深度的適配及優化,通過對AWS S3、HDFS、NFS及S3生態體系等各類協議的支持,在穩定性、可靠性、易用性及性能等方面滿足企業各類復雜應用的需求。
GBase 8a MPP產品優勢
GBase 8a MPP是GBASE南大通用自主研發的,面向海量數據查詢分析應用領域的一款高性能國產分析型型數據庫產品,用于滿足各個數據密集型行業日益增大的數據查詢、數據統計、數據分析、數據挖掘和數據備份等數據存儲、管理和處理需求,可用做數據倉庫系統、BI系統和決策支持系統的承載數據庫。主要應用在金融、電信、能源等擁有海量業務數據的行業得到規模化應用,在商業分析和商業智能市場領域表現突出。