一座“超級工廠”：讓中國沒有流不通的數據-電子發燒友網

新春伊始，中國各個行業、領域都在關注一個熱詞：新質生產力。

新質生產力代表著一種生產力的躍遷，意思是“以科技創新發揮主導作用的生產力”。簡單來說，就是新興科技催生而來的顛覆性發展引擎。尤其在這個萬物互聯的數字時代，發展這種更具融合性、更體現革新內涵的生產力質態，是企業與行業的微觀訴求，同時也是地區與國家的宏觀訴求。

如何才能獲得新質生產力，是千行萬業共同面對的時代考題。

想要回答這道考題，就需要認識一個基本邏輯：生產力的迭代是人類文明發展的內生引擎，其來自對生產要素的有效激活，而新質生產力的來源，就要依靠對新型生產要素的激活。

提到新生產要素，一個關鍵詞將映入眼簾，這就是“數據要素”。

與傳統生產活動消耗自然資源不同，數字經濟的發展消耗的是“數據要素”。在2019年，相關政策明確指出了“健全勞動、資本、土地、知識、技術、管理、數據等生產要素由市場評價貢獻、按貢獻決定報酬的機制”，標志著數據要素正式投入到中國經濟的產出與分配階段，成為繼勞動力、土地、資本、技術之后的“第五生產要素”。

去年，國家數據局的成立受到全球矚目。隨后在年底，國家數據局等17部門聯合印發了《“數據要素×”三年行動計劃（2024—2026年）》，明確開展“數據要素×科技創新”行動。探索激活數據要素價值、獲得新質生產力的方法，成為今年國民經濟與企業發展最重要的議題之一。

然而在實踐中，企業經常發現數據并不匱乏，缺乏的是管理、使用與流通。粗獷而富有生命力的數據散落在田野間蓄勢待發，但想讓它們形成數據資產、變成真實的生產力，還需要一座座現代化的“工廠”來完成。

2月20日，伴隨著萬千企業新春開工的音信，華為舉辦了2024數據存儲新春新品發布會。期間，華為率先發布了業界全新的數據湖解決方案。

這個解決方案，就是一座面向數據要素的超級工廠，它可以把大量原始數據進行智能加工，從而滿足數據產品的多樣化需求，解鎖了邁向數據資產化進程的層層桎梏，讓數據煥發出勃勃生機。

屬于中國大地的新質生產力從何而來？在這個AI技術喚醒每一比特數據的黃金年代，只要讓數據要素看得清、理得順、用得好、流通好，那么千行萬業自然就有了蓬勃新生的信心與底氣。

從數據要素，到數據資產：最壯闊的時代機遇

近幾年，全球范圍內迎來了以AI大模型為代表的智能技術大爆發。智能的來源是對數據的洞察與學習，因此數據要素的價值正在經歷跨世代的升級，各行業都在爆發出巨大的數據要素紅利。

舉例來看，華為盤古大模型通過對超過300PB全球天氣歷史數據，以及近10年超過70PB的衛星降水歷史數據進行學習，實現了降雨預測準確率提升20%，從而將實現在全國范圍內每年減少百億元的暴雨經濟損失。

某大型銀行，通過將53年內積累的超100PB數據，以及每天實時產生的300TB數據進行融合分析，實現了降低約5%的不良貸款率，每年減少直接損失約5億元。

這些數據要素帶來的直觀紅利，意味著巨大的產業機遇。這也讓數據要素開始向數據資產進行升級，成為企業核心資產的組成部分。同時我們知道，一種生產要素的資產化，要求其具備可量化、可估值、可流通的特性。但在數據要素的生產與流通實踐里，企業還是需要大量面對諸如數據管理困難、認證授權復雜、流通安全難以保障等問題。

簡言之，高速成長的數據要素，正在成為這個時代機遇最大、價值提升最為迅猛的生產要素。數據資產化，是每家企業都必須關注的方向，而讓這一切機遇成真的前提，是掃清數據資產化進程中的挑戰。

只有數據無礙，企業無憂，數據要素才能真正變為數據資產。

從野蠻生長，到工業化體系：建立數據要素市場面臨的挑戰

為什么提起數據資產化時，很多企業會覺得為時過早，或者障礙重重？

根據國家工業信息安全發展研究中心發布的數據，在2022年至2025年，中國數據要素市場復合增速將達到28.99％，全國數據產量將達到8.1ZB，位居全球第二。中國已經成為名副其實的“數據大國”，但從數據大國到數據強國，是千行萬業普遍面臨著數據質量不高、流通機制不暢、應用潛力釋放不足等問題。

在企業的實踐中，很容易發現數據并不像土地、資金、技術專利等傳統生產要素那樣清晰和標準化。絕大多數產業數據，都是企業在生產實踐中自然形成的，從收集到加工、流通都處于野蠻生長狀態。具體表現為數據要素的權屬判斷更為復雜，聚集和歸檔非常困難，價值密度難有標準，甚至隱私泄露、數據錯用等問題可能會給企業帶來負面影響。將這些直觀的挑戰歸類整理，華為在發布會中提到，當前在建立數據要素市場體系過程中，主要需面對四大難點：

1.數據看不清。

大中型企業、連鎖企業、跨國企業經常會面對分散在各地的海量數據。這些數據標準不一、格式多樣、源頭散落各地，從而導致企業事實上很難全盤縱覽整體性數據。與此同時，數據盤點依賴人工操作，導致盤點成本大、訛誤多，進一步加重了數據“看不清”的問題。

2.數據理不順。

數據收集之后，需要整理分類。但目前大量企業的數據分類依賴人工，這就導致分類標準難以統一，數據容易變得雜亂無章。當前階段，中國企業數據分類依賴人工比例超過了60%，在海量數據時代，提升數據分類自動化水平迫在眉睫。

3.數據用不好。

在收集與分類之后，數據需要真正加工成數據產品才能發揮其價值。但在這個階段，企業往往面臨數據應用方式較為傳統，數據加工成本過大等問題。比如說，用自身數據訓練AI大模型是企業非常關注的領域。但在AI訓練之前，需要大量時間進行數據清洗與標注，這個成本是很多企業難以承受的。

4.數據流不動。

數據資產化的最后一環在于數據的高效流通。但在這個階段，企業一方面是“不敢流”，需要承擔安全與合規方面的風險，一旦流通起來就可能面臨“隱私裸奔”的危機。另一方面是“流得慢”，數據流通過程中所需的存、算、網等數字基礎設施開支也是擋在企業面前的一座大山。這導致很多企業在數據流通時，還在選擇快遞硬盤這種原始且不安全的方法。

這四大挑戰，關注到了數據從生成、管理到流通的每一個環節，可以說是所有企業都將面對的數據資產化難題。如何才能把千行萬業野蠻生長的數據，變成精密、可靠、標準化的工業品，是數據要素時代的核心考題。

為此，華為希望搭建一座“超級工廠”，來幫助海量數據走向工業化的全新時代。

從千行萬業，到一座“超級工廠”：華為數據湖解決方案

千行萬業，都需要加速數據資產化進程。這也意味著千行萬業的數據，也都需要這樣一座“超級工廠”。它像流水線一樣完成原始數據的加工、盤點、分類，完成一站式處理，并且構建可靠的流通傳輸環境，讓數據要素從野蠻粗放走向清晰規整。

這座工廠，就是華為基于GFS打造的數據湖解決方案。GFS（Global File System）是指全局文件系統，它作為整個方案的靈魂組件與驅動引擎，與上層的數據服務層和下層的數據存儲層協同，構筑了一個完善而高效的數據編織層，以全局命名空間，幫助數據資產實現可視、可管、可用。

(華為分布式存儲領域總裁袁遠)

具體而言，為了應對數據資產化進程中的四大挑戰，華為數據湖解決方案包含這樣一些技術創新特性：

首先，是數據資產一張圖。

華為數據湖解決方案可以實現跨地域、跨站點、跨廠家的統一元數據納管，同時實現不同格式、協議的數據均無損地統一入湖。除此之外，為了應對遠數據掃描上報過程中的低效率、重人工問題，數據湖解決方案還能將增量數據在業務側無感知地實時更新，從而橫跨時間、空間的限制，幫助企業將所有數據盡收眼底。

某世界500強企業，需要面對來自全球超過200家子公司，130多家全球代表處的數據匯總，導致經營報告變成了巨大工程。通過應用全局資產一張圖，這家公司將超過100萬張表格進行了高效地盤點、注冊，從而使月度報告生成時間從18天縮短為3天，年度報告生成時間從三周縮短至一周，大幅提升了經營決策效率，真正做到了全球數據一覽無遺。

其次，是智能數據目錄。

面對數據的整理、分類難題，華為數據湖解決方案提供智能數據目錄能力，從而實現自動化的數據標簽與聚合，滿足數據的高效檢索與呈現。從應用場景上看，智能數據目錄有兩類應用。一是進行數據合規的自動分級，對敏感數據、隱私信息進行自動識別。二是數據內容的自動分類，將數據按照業務需求進行智能的屬性化標簽處理。

某海外企業在進行AI質檢實踐中，就應用了智能數據目錄能力。通過自動化的數據標簽與數據處理，將需要數天完成的數據處理時長縮短到了18分鐘，相關服務器數量也減少了一半，全方位提升了數據整理效率，降低了相關成本。

最后，是通過構建可信的數據交換空間，讓數據真正安全高效地流通。

華為數據湖解決方案提出了可信數據空間的概念。在這個空間里，企業可以通過合法性認證、安全管控策略、全鏈路加解密、日志留痕等能力，實現數據的可信、可控和可追溯流轉，并支持第三方監管與運營，從而在數據流通雙方或者多方之間搭建了安全可信的數據要素通道。

針對數據流通效率低、成本高的問題，華為數據湖解決方案也提供了面向跨域訪問的數據智能緩存能力，訪問任何地域的數據都像訪問本地一樣高效。此外，在數據傳輸過程中提供2:1的無損壓縮能力，從而降低數據傳輸壓力，節省相關成本。

總之，華為數據湖解決方案這座為數據要素而生的“超級工廠”，蘊含了針對數據資產化過程中每項挑戰的解題思路。

踏著數據資產化的腳步，一場引爆數字時代的熊熊烈火便至此燃燒起來，迸發出超乎想象的巨大能量。

從實踐，到未來：讓中國沒有流不通的數據

從當前階段企業的數據資產化實踐，到未來更廣闊的數據市場構建，可以看到華為數據湖解決方案將展現巨大的潛力，最終推動新質生產力在每個行業、每家企業中涌現出來。事實上，在當前的數據資產化實踐中，先行一步的數字化、智能化探索者們已從中獲益。

舉例來說，在某家大型銀行中，原本需要面對總行與分行之間、銀行同業之間缺乏安全、高效數據流通手段，導致業務上線慢，安全顧慮大的問題。

通過在總行、分行統一部署華為數據湖解決方案，該銀行實現了一系列數據要素的價值躍升。比如，通過可信數據空間與GFS的結合，銀行數據實現高效流通，并且全行數據使用違規的次數降低了80%，再比如，通過全局數據可視、可管，這家銀行實現了全行一張圖，從而加速數據報表生產，并讓產品開發更加敏捷，新業務上線時間從1月縮短到1周。此外，通過GFS與華為OceanStor分布式存儲的結合，這家銀行在滿足多樣化業務負載、協議訴求的同時，通過熱、溫、冷數據智能分級實現了TCO下降30%。

這一案例不僅對金融行業具有參考價值，對于各個行業的數據資產化來說，都有積極的借鑒意義。

而望向更遠的未來，華為將推動open-GFS開源計劃，面向伙伴及用戶開放包括異構接入框架、全局視圖管理以及數據流動引擎等核心能力，從而完成更貼近行業的數據流通能力、加速數據資產化進程，讓用戶免除后顧之憂。