實施混合式數(shù)據(jù)分析平臺的三個步驟

過去八年間，數(shù)據(jù)中臺及其“統(tǒng)一數(shù)據(jù)、統(tǒng)一服務(wù)、統(tǒng)一身份（One data, one service, one ID）”理念的廣泛采用，推動了中心化數(shù)據(jù)平臺和職責(zé)的普及。2023年Gartner中國CIO調(diào)研顯示，80%的中國受訪者依賴中心化IT部門來提供IT架構(gòu)能力、數(shù)據(jù)、網(wǎng)絡(luò)安全標(biāo)準(zhǔn)和政策。

然而，中心化IT放大了兩個問題：IT無法快速展示數(shù)據(jù)平臺投資的業(yè)務(wù)價值，IT對高速變化的業(yè)務(wù)需求的響應(yīng)較為緩慢、被動。關(guān)于是否采用數(shù)據(jù)中臺/數(shù)據(jù)網(wǎng)格（Data Mesh）的許多爭論，實際上都指向一個更為根本的問題：企業(yè)的數(shù)據(jù)分析平臺和職責(zé)，適合怎樣的中心化/去中心化程度。

中國企業(yè)機構(gòu)在數(shù)據(jù)驅(qū)動轉(zhuǎn)型中很難兼顧的兩個需求，是數(shù)據(jù)和分析（D&A）的過程敏捷性和成果可靠性。為此，中國D&A領(lǐng)導(dǎo)者應(yīng)采用混合式分析平臺及其配套計劃，成功實現(xiàn)由數(shù)據(jù)驅(qū)動的機構(gòu)轉(zhuǎn)型。

根據(jù)企業(yè)機構(gòu)需求確定中心化程度

Gartner定義了數(shù)據(jù)和分析旅程的三個階段：后企業(yè)數(shù)據(jù)倉庫（EDW）階段、邏輯數(shù)據(jù)倉庫（LDW）階段和數(shù)據(jù)編織階段（見圖1）。

圖1 從企業(yè)數(shù)倉向邏輯數(shù)倉和數(shù)據(jù)編織的演變

與北美和歐洲相比，亞太和中國由于存在更大的行業(yè)差距、地域差距和其他影響因素，企業(yè)機構(gòu)的數(shù)據(jù)分析成熟度差異更大。除數(shù)據(jù)分析成熟度之外，企業(yè)業(yè)務(wù)組合的多元化程度、行業(yè)競爭激烈程度等很多因素也影響著數(shù)據(jù)和分析職責(zé)的中心化程度。

D&A領(lǐng)導(dǎo)者應(yīng)全面評估企業(yè)機構(gòu)的數(shù)據(jù)分析成熟度和相關(guān)其他因素，確定最佳適用原則以及優(yōu)先度最高的數(shù)據(jù)分析任務(wù)。

運用Gartner雙模概念進化數(shù)據(jù)分析平臺

除了涉及混合數(shù)據(jù)分析原則外，另一個關(guān)鍵而困難的任務(wù)是在細粒度層面上實現(xiàn)業(yè)務(wù)線和IT之間各項技術(shù)權(quán)責(zé)的最佳平衡?！皹I(yè)務(wù)部門對數(shù)據(jù)治理項目的參與度有限”和“分析交付成果等待時間過長、業(yè)務(wù)滿意度低”等負(fù)面評價，是平衡失調(diào)的典型跡象。

IT擁有的企業(yè)數(shù)據(jù)倉庫/湖和業(yè)務(wù)線擁有的數(shù)據(jù)集市/沙箱，并不互相排斥。兩類平臺有各自適用的數(shù)據(jù)分析用例，可通過Gartner雙模概念進行區(qū)分。

雙模IT旨在為兩種IT工作負(fù)載實施不同的交付策略：

●   模式1：傳統(tǒng)模式，強調(diào)可靠性、安全性和準(zhǔn)確性，通常是中心化的。

●   模式2：探索模式，強調(diào)敏捷性和時效性，通常是去中心化的。

在數(shù)據(jù)和分析領(lǐng)域，模式1用例優(yōu)先考慮數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全和數(shù)據(jù)可復(fù)用性，而不是敏捷性。這些用例應(yīng)在中心化數(shù)據(jù)分析平臺上交付，遵循嚴(yán)格的數(shù)據(jù)治理規(guī)則以及由中心化IT部門主導(dǎo)的詳細測試流程。

模式2用例具有探索性和時效性，其洞察提供時效性優(yōu)先于數(shù)據(jù)治理標(biāo)準(zhǔn)。應(yīng)用/結(jié)果可在原型開發(fā)環(huán)境中交付，使用戶能在有限的IT參與度下靈活完成探索和調(diào)查。根據(jù)數(shù)據(jù)敏感度和隱私級別，部分新的源數(shù)據(jù)可繞過數(shù)據(jù)倉庫/數(shù)據(jù)湖，直接采集到目標(biāo)應(yīng)用或數(shù)據(jù)集市中。

持續(xù)調(diào)整數(shù)據(jù)分析角色和職責(zé)分配

隨著技術(shù)架構(gòu)的發(fā)展，不同數(shù)據(jù)分析角色的責(zé)任也應(yīng)不斷變化，以適應(yīng)各類用例的不同價值偏好。在復(fù)雜的用例中，數(shù)據(jù)工程、數(shù)據(jù)治理、報表/應(yīng)用交付等端到端任務(wù)通常由不同的部門完成。2023年Gartner中國CIO調(diào)研顯示，對于“制定企業(yè)數(shù)字變革愿景時面臨的主要困難”這一問題，得票最高的四項有三項與跨部門協(xié)調(diào)有關(guān)，這反映了IT和業(yè)務(wù)部門之間的責(zé)任不匹配。

原則上，與數(shù)據(jù)基礎(chǔ)設(shè)施關(guān)聯(lián)較為緊密的任務(wù)，如數(shù)據(jù)獲取和元數(shù)據(jù)變更協(xié)調(diào)，應(yīng)由IT集中管理。與洞察消費者關(guān)聯(lián)較為緊密的任務(wù)，如BI報表交付和自助服務(wù)分析，則應(yīng)更多地由業(yè)務(wù)端參與或由業(yè)務(wù)領(lǐng)導(dǎo)者負(fù)責(zé)。

用例責(zé)任分配不當(dāng)，會造成預(yù)期價值偏好與現(xiàn)實情況不匹配，進而導(dǎo)致業(yè)務(wù)價值稀釋。D&A領(lǐng)導(dǎo)者應(yīng)不斷調(diào)整責(zé)任歸屬，使之符合企業(yè)機構(gòu)的數(shù)據(jù)分析成熟度、數(shù)據(jù)分析平臺發(fā)展進度以及新的數(shù)據(jù)分析用例模式。