在中國投資進行元數(shù)據(jù)驅動數(shù)據(jù)編織設計的三大理由

數(shù)據(jù)編織是一種新興的數(shù)據(jù)管理設計，在中國保持了較高的市場吸引力。2022年Gartner數(shù)據(jù)和分析云采用調(diào)研顯示，盡管受訪者對“數(shù)據(jù)編織”一詞的定義不盡相同，但42%的中國用戶表示已采用這一技術，另有34%的受訪者計劃在未來12個月內(nèi)采用這項技術。這兩個選項的受訪者占比都超過了全球水平（見圖1）。

圖1：中國客戶與全球客戶的數(shù)據(jù)編織采用計劃

數(shù)據(jù)分析和人工智能（AI）技術及其在垂直行業(yè)用例的爆炸式增長，使企業(yè)數(shù)據(jù)基礎設施變得日益復雜和難以維護。經(jīng)濟和地緣政治不確定性導致數(shù)據(jù)監(jiān)管環(huán)境難以預測，進一步提高了管理難度。如果企業(yè)無法實施由主動元數(shù)據(jù)驅動的數(shù)據(jù)編織來提升數(shù)據(jù)和分析（D&A）彈性和敏捷性，D&A系統(tǒng)的維護成本將超過其創(chuàng)造的價值。

千變?nèi)f化的宏觀環(huán)境導致了數(shù)據(jù)管理規(guī)范的不確定性

過去兩年，中國政府發(fā)布了多項國家原則，如《數(shù)據(jù)二十條》和《數(shù)字經(jīng)濟發(fā)展十四五規(guī)劃》，以促進數(shù)據(jù)、分析和AI在經(jīng)濟中的應用。與此同時，新的數(shù)據(jù)分析和AI用例（物聯(lián)網(wǎng)[IOT]、數(shù)字孿生、元宇宙、生成式AI等）不斷涌現(xiàn)，使中國企業(yè)機構進一步推動數(shù)據(jù)分析和AI的普及。

另一方面，主要由地緣政治緊張局勢驅動的數(shù)據(jù)安全原則和自給自足要求，也在迫使企業(yè)更謹慎、更合規(guī)地使用數(shù)據(jù)。

為同時滿足上述兩個看上去對立的需求，數(shù)據(jù)和分析能力的升級路線圖和優(yōu)先任務變得難以預測。同時，由于缺乏對當前數(shù)據(jù)和分析平臺使用情況的持續(xù)監(jiān)控和分析，企業(yè)無法主動識別潛在的分析需求和問題，導致大部分數(shù)據(jù)管理任務很被動。數(shù)據(jù)編織中的主動元數(shù)據(jù)管理，可以幫助企業(yè)機構以主動和自主的方式識別這些需求和問題。

更加復雜和去中心化的D&A架構

由于境內(nèi)外的D&A供應商生態(tài)系統(tǒng)完全不同，數(shù)據(jù)安全和跨境數(shù)據(jù)傳輸法規(guī)日益明確，在中國境內(nèi)和境外同時開展業(yè)務的企業(yè)（例如在中國開展業(yè)務的跨國企業(yè)，以及正在海外開展業(yè)務的中國企業(yè)）必須構建兩組不同的D&A架構，甚至是不同的IT架構。對于僅在中國境內(nèi)開展業(yè)務的企業(yè)機構來說，云遷移和技術自給自足計劃的開展，會使其D&A架構長期處于轉型中的狀態(tài)。

出于上述原因，中國企業(yè)機構的D&A架構與全球同行相比，會具有更強的去中心化屬性和復雜性。這將導致IT運營成本大幅增加，流程也會變得更為復雜。

分析對比數(shù)據(jù)的設計期望與實際體驗之間的差距，可以更有效地完成上述大部分任務。數(shù)據(jù)編織中的主動元數(shù)據(jù)管理，通過比較設計時元數(shù)據(jù)和運行時元數(shù)據(jù)來幫助企業(yè)機構分析數(shù)據(jù)的設計期望與實際體驗。這將使企業(yè)機構的系統(tǒng)、數(shù)據(jù)和數(shù)據(jù)管道在資源效率、性能、安全性、合規(guī)性和可用性方面始終處于“自動化可觀測”狀態(tài)。

跨部門溝通障礙

技術和業(yè)務團隊之間的溝通障礙，仍然是中國企業(yè)機構快速、可持續(xù)地利用數(shù)據(jù)創(chuàng)造業(yè)務價值的一個主要障礙。2022年，Gartner收到了大量中國客戶關于D&A項目跨部門溝通的問詢，包括如何更好地與業(yè)務利益相關者對齊數(shù)據(jù)業(yè)務語義，以及如何使數(shù)據(jù)團隊更快地做出響應。這些問題大多關乎數(shù)據(jù)定義與其真實運營體驗之間的偏差，即“語義漂移”。在大型企業(yè)機構中，這個問題更嚴重，會拖累或阻礙數(shù)據(jù)和分析項目。

主動元數(shù)據(jù)管理通過對數(shù)據(jù)工程師和數(shù)據(jù)消費者內(nèi)容的持續(xù)分析，生成大量洞察，包括：

?   特定用例中使用的源數(shù)據(jù)語義是否發(fā)生了變化

?   數(shù)據(jù)使用過程中是否存在安全或隱私問題

?   數(shù)據(jù)管道中的業(yè)務邏輯是否需要更新，以糾正語義漂移導致的數(shù)據(jù)質(zhì)量問題