GBase GCDW
云原生數(shù)據(jù)倉(cāng)庫(kù)GCDW
產(chǎn)品簡(jiǎn)介
產(chǎn)品介紹
南大通用云數(shù)據(jù)倉(cāng)庫(kù)GBase Cloud Data Warehouse（簡(jiǎn)稱 GCDW）是一款自主研發(fā)的基于列存儲(chǔ)的海量分布式大規(guī)模并行處理的多實(shí)例彈性云數(shù)據(jù)倉(cāng)庫(kù)。GCDW既支持本地部署（私有云下的計(jì)算與存儲(chǔ)分離模式）也支持云上部署，采用存算分離架構(gòu)，支持計(jì)算資源和存儲(chǔ)資源的無(wú)限獨(dú)立擴(kuò)展，適用于分析類(lèi)型的大數(shù)據(jù)平臺(tái)、綜合性BI系統(tǒng)、數(shù)據(jù)倉(cāng)庫(kù)和集市系統(tǒng)。
產(chǎn)品架構(gòu)
存儲(chǔ)計(jì)算分離，統(tǒng)一元數(shù)據(jù)、無(wú)狀態(tài)計(jì)算節(jié)點(diǎn)
云服務(wù)
- 負(fù)責(zé)云數(shù)據(jù)倉(cāng)庫(kù)實(shí)例的訂購(gòu)服務(wù)
- 負(fù)責(zé)創(chuàng)建/刪除云數(shù)據(jù)倉(cāng)庫(kù)實(shí)例
- 提供云數(shù)據(jù)倉(cāng)庫(kù)實(shí)例訪問(wèn)入口（URL）、鑒權(quán)、訪問(wèn)控制、語(yǔ)法解析、生成執(zhí)行計(jì)劃、優(yōu)化、元數(shù)據(jù)管理與存儲(chǔ)、事務(wù)管理及執(zhí)行調(diào)度管理、用戶及權(quán)限管理、Warehouse管理、Database管理和云數(shù)據(jù)倉(cāng)庫(kù)功能服務(wù)等
- 提供管理和運(yùn)維服務(wù)能力，包括訂單管理、計(jì)費(fèi)管理、云數(shù)據(jù)倉(cāng)庫(kù)實(shí)例賬戶管理、云服務(wù)監(jiān)控運(yùn)維管理、云數(shù)據(jù)倉(cāng)庫(kù)實(shí)例管理和升級(jí)云服務(wù)管理、升級(jí)云數(shù)據(jù)倉(cāng)庫(kù)管理
虛擬倉(cāng)庫(kù)
- 負(fù)責(zé)管理不同規(guī)格計(jì)算資源
- 負(fù)責(zé)提供不同規(guī)格計(jì)算資源的算力
- 負(fù)責(zé)緩存臨時(shí)數(shù)據(jù)
數(shù)據(jù)存儲(chǔ)
- 提供分布式對(duì)象存儲(chǔ)能力，用于持久化云數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)文件
- 提供查詢過(guò)程中臨時(shí)表數(shù)據(jù)的緩存
- 提供結(jié)果集緩存的持久化
SAAS服務(wù)優(yōu)質(zhì)體驗(yàn)
無(wú)需安裝部署
完成訂購(gòu)后云數(shù)倉(cāng)實(shí)例自動(dòng)后臺(tái)部署，開(kāi)箱即用，縮短業(yè)務(wù)上線時(shí)間
自動(dòng)調(diào)優(yōu)
智能索引自動(dòng)維護(hù)；數(shù)據(jù)特征相關(guān)統(tǒng)計(jì)信息自動(dòng)更新，基于CBO的優(yōu)化器，保證生成最優(yōu)執(zhí)行計(jì)劃，省去繁復(fù)的數(shù)據(jù)庫(kù)調(diào)優(yōu)工作
簡(jiǎn)單易用的Web用戶界面
提供豐富的開(kāi)發(fā)、管理功能、工具集成功能，為客戶提供簡(jiǎn)單易用的數(shù)據(jù)庫(kù)開(kāi)發(fā)和使用環(huán)境
支持多云部署
支持多種公有云環(huán)境下的部署，給客戶更多選擇；支持跨域、跨云的一致性數(shù)據(jù)服務(wù)接口，滿足大型用戶不同地域的業(yè)務(wù)運(yùn)營(yíng)和監(jiān)管要求；提供不同公有云間數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)復(fù)制和遷移工具，支持跨域和跨云的數(shù)據(jù)查詢；支持混合云方式部署，兼顧私有云的自主性和公有云的彈性。
無(wú)需維護(hù)
節(jié)點(diǎn)故障、版本升級(jí)、負(fù)載均衡均由云數(shù)據(jù)倉(cāng)庫(kù)后臺(tái)功能提供，無(wú)需客戶儲(chǔ)備專職DBA和系統(tǒng)運(yùn)維人員，節(jié)省運(yùn)維成本；
按實(shí)際使用計(jì)費(fèi)幫助用戶降低使用成本
存儲(chǔ)資源根據(jù)實(shí)際使用的存儲(chǔ)容量計(jì)費(fèi)；計(jì)算資源根據(jù)集群的規(guī)模和使用時(shí)間計(jì)費(fèi)；允許用戶在無(wú)SQL任務(wù)執(zhí)行的情況下自動(dòng)關(guān)閉計(jì)算資源服務(wù)。
核心優(yōu)勢(shì)
極致彈性
采用K8s部署方式時(shí)，GCDW提供極致彈性，可快速擴(kuò)容和縮容，支持創(chuàng)建多虛擬倉(cāng)庫(kù)，支持自動(dòng)彈性。
秒級(jí)擴(kuò)容縮容
采用存儲(chǔ)、計(jì)算分離的架構(gòu)，存算獨(dú)立部署，獨(dú)立擴(kuò)展；統(tǒng)一元數(shù)據(jù)服務(wù)，實(shí)現(xiàn)了計(jì)算集群、管理集群無(wú)狀態(tài)，可以實(shí)現(xiàn)秒級(jí)的擴(kuò)容，無(wú)需進(jìn)行數(shù)據(jù)重分布。
SaaS 服務(wù)
無(wú)需安裝部署，開(kāi)箱即用，訂購(gòu)后自動(dòng)部署，縮短業(yè)務(wù)上線時(shí)間；無(wú)需運(yùn)維，自動(dòng)調(diào)優(yōu)；提供簡(jiǎn)單易用的WEB開(kāi)發(fā)、管理功能。
物理多租
租戶間資源隔離，租戶內(nèi)通過(guò)不同的虛擬倉(cāng)庫(kù)計(jì)算資源負(fù)載不同的業(yè)務(wù)，多租戶資源隔離，支持按需申請(qǐng)計(jì)算資源徹底解決傳統(tǒng)數(shù)倉(cāng)混合負(fù)載問(wèn)題。
降低成本
在公有云上，采用 SaaS 服務(wù)提供方式，無(wú)硬件投資和部署成本；云上自動(dòng)版本更新，故障恢復(fù)，服務(wù)7*24小時(shí)無(wú)停機(jī)，用戶無(wú)運(yùn)維成本，僅需按使用量支付費(fèi)用。
適用場(chǎng)景
提升算力使用場(chǎng)景：解決計(jì)算資源不足問(wèn)題
業(yè)務(wù)場(chǎng)景描述：
租戶在申請(qǐng)?jiān)茢?shù)倉(cāng)實(shí)例時(shí)，申請(qǐng)了一個(gè)中等規(guī)模的虛擬倉(cāng)庫(kù)。在其業(yè)務(wù)初期，業(yè)務(wù)負(fù)載不高，虛擬倉(cāng)庫(kù)的算力可以滿足客戶的業(yè)務(wù)請(qǐng)求。隨著用戶業(yè)務(wù)規(guī)模的擴(kuò)大，業(yè)務(wù)數(shù)據(jù)量不斷增加，虛擬倉(cāng)庫(kù)對(duì)業(yè)務(wù)請(qǐng)求的響應(yīng)時(shí)間因?yàn)閿?shù)據(jù)量的增大而變長(zhǎng)，使得客戶業(yè)務(wù)響應(yīng)變慢。
云數(shù)倉(cāng)解決方案：
可以通過(guò)修改虛擬數(shù)倉(cāng)的規(guī)格，增加虛擬倉(cāng)庫(kù)的算力。該擴(kuò)容過(guò)程，可由用戶使用云數(shù)倉(cāng)的界面操作完成，云數(shù)倉(cāng)可以實(shí)現(xiàn)秒級(jí)擴(kuò)容，無(wú)需數(shù)據(jù)重新分布
提升吞吐量使用場(chǎng)景：解決并發(fā)處理能力不足問(wèn)題
業(yè)務(wù)場(chǎng)景描述：
租戶在申請(qǐng)?jiān)茢?shù)倉(cāng)實(shí)例時(shí)，申請(qǐng)了一個(gè)中等規(guī)模的虛擬倉(cāng)庫(kù)。在其業(yè)務(wù)初期，虛擬倉(cāng)庫(kù)的算力可以滿足客戶的業(yè)務(wù)請(qǐng)求。隨著用戶業(yè)務(wù)的發(fā)展，客戶數(shù)量不斷增加，對(duì)虛擬倉(cāng)庫(kù)的并發(fā)請(qǐng)求量成倍增長(zhǎng)，單個(gè)虛擬數(shù)倉(cāng)可承載的并發(fā)量是有限的，超過(guò)部分會(huì)排隊(duì)等待處理造成時(shí)間拖延。
云數(shù)倉(cāng)解決方案：
通過(guò)創(chuàng)建多個(gè)虛擬數(shù)倉(cāng)提升并發(fā)訪問(wèn)量和吞吐量。例如在1個(gè)虛擬數(shù)倉(cāng)的基礎(chǔ)上再新創(chuàng)建兩個(gè)相同規(guī)格的虛擬數(shù)倉(cāng)。 該擴(kuò)容過(guò)程，可由用戶使用云數(shù)倉(cāng)的界面操作完成，虛擬數(shù)倉(cāng)秒級(jí)創(chuàng)建完成，多個(gè)虛擬數(shù)倉(cāng)可以訪問(wèn)相同的業(yè)務(wù)表。
業(yè)務(wù)消峰使用場(chǎng)景：解決業(yè)務(wù)請(qǐng)求存在波峰波谷不平穩(wěn)問(wèn)題
業(yè)務(wù)場(chǎng)景描述：
一天24小時(shí)以內(nèi)，平時(shí)總數(shù)50個(gè)并發(fā)左右，總會(huì)有1個(gè)或者2個(gè)業(yè)務(wù)高峰，超過(guò)100并發(fā)連續(xù)持續(xù)1小時(shí)左右
云數(shù)倉(cāng)解決方案：
使用云數(shù)倉(cāng)系統(tǒng)的自動(dòng)彈性功能。在創(chuàng)建虛擬倉(cāng)庫(kù)時(shí)，配置該虛擬倉(cāng)庫(kù)最多有3個(gè)計(jì)算集群，其中1個(gè)計(jì)算集群保持一直啟動(dòng)承載業(yè)務(wù)，兩外兩個(gè)計(jì)算集群由業(yè)務(wù)的并發(fā)量自動(dòng)觸發(fā)。比如每個(gè)計(jì)算集群可承載的最大并發(fā)量為50，那么，當(dāng)業(yè)務(wù)并發(fā)量每大于50時(shí)，云數(shù)倉(cāng)系統(tǒng)自動(dòng)調(diào)度啟動(dòng)一個(gè)新的計(jì)算集群開(kāi)始承接業(yè)務(wù)請(qǐng)求；業(yè)務(wù)并發(fā)量下降到50以下的時(shí)候，自動(dòng)啟動(dòng)的計(jì)算集群在沒(méi)有業(yè)務(wù)請(qǐng)求的條件下自動(dòng)停止。
云數(shù)倉(cāng)實(shí)例內(nèi)多租：解決部門(mén)級(jí)資源爭(zhēng)搶問(wèn)題
業(yè)務(wù)場(chǎng)景描述：
一個(gè)企業(yè)客戶A具有多個(gè)下屬部門(mén)，各個(gè)部門(mén)期望以獨(dú)立的資源使用數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)執(zhí)行各自的業(yè)務(wù)計(jì)算。例如：5個(gè)部門(mén)，部門(mén)1、部門(mén)2、部門(mén)3各自獨(dú)立使用計(jì)算資源，部門(mén)4和部門(mén)5共享相同的計(jì)算資源。
云數(shù)倉(cāng)解決方案：
企業(yè)客戶A作為租戶申請(qǐng)?jiān)茢?shù)倉(cāng)實(shí)例Ins，該租戶在云數(shù)倉(cāng)實(shí)例Ins依據(jù)自身的組織結(jié)構(gòu)及業(yè)務(wù)需要規(guī)劃創(chuàng)建多個(gè)數(shù)據(jù)庫(kù)角色，然后為每個(gè)角色創(chuàng)建響應(yīng)的計(jì)算資源即虛擬數(shù)倉(cāng)和數(shù)據(jù)庫(kù)，再分配給對(duì)應(yīng)的部門(mén)使用，以滿足上述業(yè)務(wù)場(chǎng)景的使用需要。
混合負(fù)載使用場(chǎng)景：解決數(shù)據(jù)加載和數(shù)據(jù)分析同時(shí)執(zhí)行導(dǎo)致的資源爭(zhēng)搶問(wèn)題
業(yè)務(wù)場(chǎng)景描述：
一個(gè)企業(yè)客戶B在僅具有一個(gè)數(shù)據(jù)倉(cāng)庫(kù)的情況下，執(zhí)行加載業(yè)務(wù)時(shí)會(huì)因資源爭(zhēng)搶而導(dǎo)致查詢業(yè)務(wù)性能下降，甚至影響業(yè)務(wù)的開(kāi)展。
云數(shù)倉(cāng)解決方案：
企業(yè)客戶B可以創(chuàng)建兩個(gè)虛擬數(shù)倉(cāng)，一個(gè)用于業(yè)務(wù)查詢，一個(gè)用于數(shù)據(jù)加載；前者可以始終處于集群?jiǎn)?dòng)狀態(tài)，后者僅在執(zhí)行加載業(yè)務(wù)的時(shí)候啟動(dòng)，加載完成以后虛擬數(shù)倉(cāng)停止運(yùn)行，節(jié)省系統(tǒng)資源。
