【GBASE案例】GBase 8a mpp助力農(nóng)行大數(shù)據(jù)平臺(tái)集群搬遷案例分析
項(xiàng)目背景
隨著農(nóng)行數(shù)據(jù)量的與日俱增，GBase集群規(guī)劃也逐年增大，截止目前農(nóng)行集群規(guī)模1000節(jié)點(diǎn)以上，幾十套集群環(huán)境。為了便于后期服務(wù)器的統(tǒng)一管理、降低運(yùn)營(yíng)管控成本。故農(nóng)總行決定將亦莊所有GBase集群服務(wù)器搬遷至農(nóng)行北清路稻香湖數(shù)據(jù)中心機(jī)房。
中國(guó)農(nóng)業(yè)銀行總行企業(yè)級(jí)大數(shù)據(jù)平臺(tái)建設(shè)從2014年4月建設(shè)，2016年4月完成數(shù)據(jù)庫(kù)主倉(cāng)121節(jié)點(diǎn)AB雙活集群，而后針對(duì)業(yè)務(wù)主題建立了多套數(shù)據(jù)集市，GBase 8a mpp產(chǎn)品承載搭建了17套集市集群、1套主倉(cāng)業(yè)務(wù)集群、8套分析類業(yè)務(wù)集群。支撐總數(shù)據(jù)量大于20PB（源數(shù)據(jù)）。完成了農(nóng)總行重要數(shù)據(jù)的整合，匯聚、存儲(chǔ)、管理全行高價(jià)值數(shù)據(jù)，并根據(jù)上層應(yīng)用需求提供全業(yè)務(wù)數(shù)據(jù)共享服務(wù)；提供海量數(shù)據(jù)處理和分析能力，提供高性能、高效率和高質(zhì)量的數(shù)據(jù)分析、挖掘、清洗等能力。
因管理全行業(yè)務(wù)數(shù)據(jù)巨增及生命周期加長(zhǎng)，隨之存儲(chǔ)空間和分析性能不足，需進(jìn)行擴(kuò)容、搬遷管理及整合，為了便于后期服務(wù)器的統(tǒng)一管理、降低運(yùn)營(yíng)管控成本。故決定將亦莊所有GBase集群服務(wù)器搬遷至農(nóng)行北清路稻香湖數(shù)據(jù)中心機(jī)房。
解決方案
1. 前期對(duì)AB雙活集群進(jìn)行切換模擬演練，梳理切換過(guò)程中相關(guān)步驟，異常問(wèn)題的評(píng)估與解決；
2. 對(duì)已有的雙活集群采用集群雙活切換搬遷機(jī)制。先搬遷B集群，次日AB集群再開(kāi)啟數(shù)據(jù)同步功能。保證B集群數(shù)據(jù)與A集群一致；之后在適當(dāng)時(shí)間窗口再搬遷A集群服務(wù)器；
3. 對(duì)只有A集群沒(méi)B集群的集群環(huán)境，采用臨時(shí)搭建B集群（新地方）的方式。將A集群數(shù)據(jù)同步到臨時(shí)B集群，在AB數(shù)據(jù)一致的前提下，進(jìn)行A集群的搬遷；
4. 保證在搬遷過(guò)程中南大通用技術(shù)人員全力配合農(nóng)行相關(guān)運(yùn)維人員的工作，保證集群搬遷后的集群狀態(tài)檢查，異常處理等工作。
價(jià)值體現(xiàn)
● 全面盤點(diǎn)數(shù)據(jù)資產(chǎn)
對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行全面盤點(diǎn)，形成數(shù)據(jù)地圖，為業(yè)務(wù)應(yīng)用和數(shù)據(jù)獲取夯實(shí)基礎(chǔ)
● 不斷提升數(shù)據(jù)質(zhì)量
數(shù)據(jù)質(zhì)量的不斷提升是基礎(chǔ)
● 實(shí)現(xiàn)數(shù)據(jù)互聯(lián)互通
實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型，打破數(shù)據(jù)孤島，實(shí)現(xiàn)全行業(yè)務(wù)數(shù)據(jù)互聯(lián)互通
● 提高數(shù)據(jù)獲取效率
讓數(shù)據(jù)隨時(shí)快速有效就緒，縮短數(shù)據(jù)準(zhǔn)備時(shí)間
● 保障數(shù)據(jù)安全合規(guī)
保障安全是數(shù)據(jù)資產(chǎn)管理的底線
● 數(shù)據(jù)價(jià)值持續(xù)釋放
持續(xù)和動(dòng)態(tài)地改進(jìn)，隨技術(shù)、市場(chǎng)、產(chǎn)業(yè)的變化不斷迭代
對(duì)大數(shù)據(jù)進(jìn)行管理、整合、分析并挖掘其價(jià)值，從而幫助客戶實(shí)現(xiàn)大數(shù)據(jù)資產(chǎn)的風(fēng)險(xiǎn)可控、安全合規(guī)、績(jī)效提升，持續(xù)提供不斷創(chuàng)新的大數(shù)據(jù)服務(wù)，更有效地使用大數(shù)據(jù)資產(chǎn)而組織和實(shí)施的制度、標(biāo)準(zhǔn)、流程、管理、整合、分析等工作的實(shí)踐集合，為客戶創(chuàng)造更多的業(yè)務(wù)價(jià)值。
服務(wù)：厚積薄發(fā)的數(shù)據(jù)服務(wù)
產(chǎn)品：豐富的全棧產(chǎn)品線
研發(fā)：雄厚的研發(fā)技術(shù)實(shí)力
技術(shù)：近20年的產(chǎn)品技術(shù)沉淀
資金：近20億的研發(fā)資金投入