12月12日,2022中國(guó)移動(dòng)全球合作伙伴大會(huì)智慧中臺(tái)生態(tài)創(chuàng)新高峰論壇成功舉辦。會(huì)上,中國(guó)移動(dòng)攜手存儲(chǔ)、計(jì)算、數(shù)據(jù)湖、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)服務(wù)等多領(lǐng)域合作伙伴,共同發(fā)布了《大數(shù)據(jù)湖倉(cāng)一體技術(shù)白皮書》(以下簡(jiǎn)稱《白皮書》),全面闡述了湖倉(cāng)一體的發(fā)展背景、關(guān)鍵技術(shù)、典型應(yīng)用場(chǎng)景、實(shí)踐案例以及當(dāng)前挑戰(zhàn)與未來展望等內(nèi)容,是業(yè)界首個(gè)以大數(shù)據(jù)湖倉(cāng)一體為核心主題的白皮書。
圖:大數(shù)據(jù)湖倉(cāng)一體白皮書封面
隨著 5G、云計(jì)算、大數(shù)據(jù)、AI等新技術(shù)與新應(yīng)用的蓬勃發(fā)展,企業(yè)數(shù)據(jù)快速增長(zhǎng),容量正在從 PB 到 EB 級(jí)跨越,數(shù)據(jù)量呈現(xiàn)大規(guī)模、多樣性特點(diǎn),特別是非結(jié)構(gòu)化數(shù)據(jù)呈爆發(fā)式增長(zhǎng)。數(shù)據(jù)量的劇烈增長(zhǎng)對(duì)企業(yè)數(shù)據(jù)基礎(chǔ)設(shè)施提出了新的挑戰(zhàn),傳統(tǒng)數(shù)據(jù)湖和數(shù)據(jù)倉(cāng)庫(kù)已經(jīng)無(wú)法滿足數(shù)據(jù)的組織、存儲(chǔ)、分析需求。計(jì)算能力的提升、存儲(chǔ)介質(zhì)的飛躍式發(fā)展以及云計(jì)算的成熟,三方面因素的有機(jī)結(jié)合共同促成了以大數(shù)據(jù)為核心的數(shù)據(jù)架構(gòu)新范式——湖倉(cāng)一體的興起。
湖倉(cāng)一體作為一種新型開放式架構(gòu),能夠充分結(jié)合數(shù)據(jù)湖和數(shù)據(jù)倉(cāng)庫(kù)的優(yōu)勢(shì),在數(shù)據(jù)湖低成本的存儲(chǔ)架構(gòu)之上,繼承數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)處理和管理功能,存儲(chǔ)、轉(zhuǎn)換、集成結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),將不同種類數(shù)據(jù)融合在一起,并從中提取出有用價(jià)值。
面對(duì)新的應(yīng)用需求,一方面湖倉(cāng)一體產(chǎn)品可從企業(yè)的核心訴求出發(fā),更好地支撐企業(yè)的數(shù)據(jù)存儲(chǔ)與分析;另一方面,湖倉(cāng)一體架構(gòu)可支持企業(yè)優(yōu)化自身底層數(shù)據(jù)治理架構(gòu),從而幫助企業(yè)提升“人效”和“能效”,更精準(zhǔn)地抓住商業(yè)機(jī)會(huì),創(chuàng)造發(fā)展優(yōu)勢(shì)。湖倉(cāng)一體技術(shù)所具備的高效的數(shù)據(jù)處理優(yōu)勢(shì)以及經(jīng)濟(jì)、節(jié)能優(yōu)勢(shì),使之在實(shí)時(shí)數(shù)倉(cāng)、支撐云原生的融合數(shù)據(jù)底座、降本增效等場(chǎng)景中具有廣泛的應(yīng)用前景。
隨著湖倉(cāng)一體技術(shù)應(yīng)用的逐步深入,未來還將具備近數(shù)據(jù)計(jì)算加速、AI驅(qū)動(dòng)數(shù)據(jù)全生命周期自動(dòng)駕駛、多云協(xié)同等先進(jìn)技術(shù)能力,以適應(yīng)更大的數(shù)據(jù)體量和更多的場(chǎng)景訴求,進(jìn)一步促進(jìn)數(shù)據(jù)價(jià)值釋放,助力“東數(shù)西算”國(guó)家戰(zhàn)略工程實(shí)施。
掃碼查看白皮書