GBASE助力山東移動地市集市建設(shè)
項目背景
山東地市集市集群長期采用Oracle數(shù)據(jù)庫進行支撐,長期處于任務(wù)滯后和存儲瓶頸的現(xiàn)狀,Oracle與亞信hadoop的數(shù)據(jù)流轉(zhuǎn)也依賴于應(yīng)用側(cè)的數(shù)據(jù)加工和抽取,時常出現(xiàn)數(shù)據(jù)不一致的問題,亟待解決。
建設(shè)方案
采用GBase UP融合Oracle+GBase 8a MPP+亞信Hadoop的融合架構(gòu)方式,通過數(shù)據(jù)虛擬化、數(shù)據(jù)聯(lián)邦技術(shù)建立引擎間高效數(shù)據(jù)交換通道,融合復(fù)雜關(guān)聯(lián)分析、流計算、圖計算、批量處理等計算模型,構(gòu)建對外統(tǒng)一,對內(nèi)可擴展的大數(shù)據(jù)平臺能力。滿足了Oracle庫內(nèi)海量數(shù)據(jù)轉(zhuǎn)移到MPP加工,通過MPP的高性能滿足各地市集市高響應(yīng)要求,同時滿足B、O域數(shù)據(jù)通過底層數(shù)據(jù)庫技術(shù)流轉(zhuǎn)到Hadoop進行庫內(nèi)建模挖掘的功能,對外提供了統(tǒng)一的透明接口,只需要簡單SQL即可訪問跨引擎的數(shù)據(jù)并進行跨引擎的關(guān)聯(lián)運算,簡化了數(shù)據(jù)流轉(zhuǎn)流程,極大提升了業(yè)務(wù)響應(yīng)需求和未來業(yè)務(wù)發(fā)展需要。
價值體現(xiàn)
1) 通過GBase UP融合OLTP、OLAP、NoSQL等技術(shù),滿足全類型數(shù)據(jù)存儲和計算需要。同時具備數(shù)據(jù)全生命周期管理功能。
2) 性能高效提升,異構(gòu)引擎間數(shù)據(jù)通過底層數(shù)據(jù)交換自動完成,簡化了數(shù)據(jù)流轉(zhuǎn)流程。
3) 數(shù)據(jù)對外服務(wù),利用地市集市數(shù)據(jù)的先天優(yōu)勢,融合非結(jié)構(gòu)數(shù)據(jù)建模加工,提供對外服務(wù)數(shù)據(jù)模型。
4) 實現(xiàn)深度精細化業(yè)務(wù)分析。高效的數(shù)據(jù)分析能力幫助客戶應(yīng)對復(fù)雜性強、效率及實時性要求高的場景,有效管理海量數(shù)據(jù),實現(xiàn)對各類數(shù)據(jù)的多維深入分析,準確挖掘數(shù)據(jù)價值。