12月12日,2022中國移動全球合作伙伴大會智慧中臺生態(tài)創(chuàng)新高峰論壇成功舉辦。會上,中國移動攜手存儲、計算、數(shù)據(jù)湖、數(shù)據(jù)倉庫、數(shù)據(jù)服務(wù)等多領(lǐng)域合作伙伴,共同發(fā)布了《大數(shù)據(jù)湖倉一體技術(shù)白皮書》(以下簡稱《白皮書》),全面闡述了湖倉一體的發(fā)展背景、關(guān)鍵技術(shù)、典型應(yīng)用場景、實踐案例以及當(dāng)前挑戰(zhàn)與未來展望等內(nèi)容,是業(yè)界首個以大數(shù)據(jù)湖倉一體為核心主題的白皮書。
圖:大數(shù)據(jù)湖倉一體白皮書封面
隨著 5G、云計算、大數(shù)據(jù)、AI等新技術(shù)與新應(yīng)用的蓬勃發(fā)展,企業(yè)數(shù)據(jù)快速增長,容量正在從 PB 到 EB 級跨越,數(shù)據(jù)量呈現(xiàn)大規(guī)模、多樣性特點,特別是非結(jié)構(gòu)化數(shù)據(jù)呈爆發(fā)式增長。數(shù)據(jù)量的劇烈增長對企業(yè)數(shù)據(jù)基礎(chǔ)設(shè)施提出了新的挑戰(zhàn),傳統(tǒng)數(shù)據(jù)湖和數(shù)據(jù)倉庫已經(jīng)無法滿足數(shù)據(jù)的組織、存儲、分析需求。計算能力的提升、存儲介質(zhì)的飛躍式發(fā)展以及云計算的成熟,三方面因素的有機結(jié)合共同促成了以大數(shù)據(jù)為核心的數(shù)據(jù)架構(gòu)新范式——湖倉一體的興起。
湖倉一體作為一種新型開放式架構(gòu),能夠充分結(jié)合數(shù)據(jù)湖和數(shù)據(jù)倉庫的優(yōu)勢,在數(shù)據(jù)湖低成本的存儲架構(gòu)之上,繼承數(shù)據(jù)倉庫的數(shù)據(jù)處理和管理功能,存儲、轉(zhuǎn)換、集成結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),將不同種類數(shù)據(jù)融合在一起,并從中提取出有用價值。
面對新的應(yīng)用需求,一方面湖倉一體產(chǎn)品可從企業(yè)的核心訴求出發(fā),更好地支撐企業(yè)的數(shù)據(jù)存儲與分析;另一方面,湖倉一體架構(gòu)可支持企業(yè)優(yōu)化自身底層數(shù)據(jù)治理架構(gòu),從而幫助企業(yè)提升“人效”和“能效”,更精準(zhǔn)地抓住商業(yè)機會,創(chuàng)造發(fā)展優(yōu)勢。湖倉一體技術(shù)所具備的高效的數(shù)據(jù)處理優(yōu)勢以及經(jīng)濟、節(jié)能優(yōu)勢,使之在實時數(shù)倉、支撐云原生的融合數(shù)據(jù)底座、降本增效等場景中具有廣泛的應(yīng)用前景。
隨著湖倉一體技術(shù)應(yīng)用的逐步深入,未來還將具備近數(shù)據(jù)計算加速、AI驅(qū)動數(shù)據(jù)全生命周期自動駕駛、多云協(xié)同等先進(jìn)技術(shù)能力,以適應(yīng)更大的數(shù)據(jù)體量和更多的場景訴求,進(jìn)一步促進(jìn)數(shù)據(jù)價值釋放,助力“東數(shù)西算”國家戰(zhàn)略工程實施。
掃碼查看白皮書