文章結構
1 什麼是資料中臺
2 資料中臺提供了什麼價值
3 什麼樣的企業需要構建資料中臺
4 怎麼構建資料中臺
5 資料中臺行業發展狀況
行業落地現狀
資料中臺9家創業公司融資盤點
6 資料中臺行業發展趨勢
01 什麼是資料中臺“資料中臺”這個詞,已經火了大半年,彷佛接過了大資料長跑賽道的下一棒。到底什麼是資料中臺?首先他不是大資料平臺,也不是一個系統。
最早在2015年,阿里巴巴提出“大中臺,小前臺”戰略,主要為了適應阿里電商業務擴大帶來的資料運營工作,通過技術、組織架構變革,提升部門協作效率實現資料共享。
阿里的中臺思想起因於2014年訪問芬蘭明星遊戲企業Supercell,學習其採用二戰期間美軍作戰系統的“中臺”,即不同於業內多款遊戲分別開發而是共同開發的模式,將支援類業務放在中臺,縮短前臺與市場距離,快速響應市場而產生的戰略規劃。
傳統企業的組織架構通常是“煙囪式”,中臺戰略的核心是重構企業組織架構,解決業務和資料重複問題,形成“靈活小前臺+能力共享的大中臺+固定的後臺”模式。
資料中臺的定義
結合國內的大資料市場,資料中臺成為中國特有的產物。根據Thoughtworks,“中臺”指“企業級的能力複用平臺”。
而資料中臺指通過資料技術,對海量資料進行採集、計算、儲存、加工,同時統一標準和口徑,是將資料加工以後封裝成一個公共的資料產品或服務。
中臺是相對於前臺和後臺的概念,前臺表現為資料的應用,通常與使用者產生互動,例如app、網站等;後臺負責資料開發,例如ERP等支援系統。
資料中臺的出現是為了解決資料後臺開發無法快速跟上前臺業務需求變化、業務系統資料孤島、資料繁雜、資料隔離的難題,在前臺和後臺之間搭建一架橋樑,提升前臺效率,增加後臺靈活性,提供資料分析能力,幫助企業從資料中學習改進,調整方向。
資料中臺的構成
根據資料中臺的定義,資料中臺的構成可以分為資料儲存、資料治理以及資料共享。
從技術通用架構來講,資料中臺還可以分為資料技術支撐、資料資產管理、資料分析挖掘、資料服務四個層面。
資料中臺是資料庫、資料倉庫、資料平臺嗎?
資料中臺不是資料庫、資料倉庫,也不是資料平臺。
資料庫:主要用來儲存資料。
資料倉庫:通過對儲存的資料進行分析、處理,為業務決策者提供分析報表,發揮輔助決策的作用。通常資料倉庫對資料的提取是按照需求來抽取的結構化資料,不是企業的全量資料,其分析報表的呈現需要一定時間,實效性較差。
資料平臺:針對資料抽取無法及時滿足業務需求的痛點,把所有業務資料匯聚、集合成為一個大的資料集,再根據業務需求單獨提取其中的小資料集,用來滿足資料應用。
資料中臺:是以上資料處理形式的補充和升級,旨在從企業整體業務層面出發,實現D2V(Data to Value),通過構建資料API (Application Programming Interface,應用程式介面),使得資料響應業務的速度更快,為資料產生價值提供橋樑,它可以建立在資料倉庫和資料平臺之上,以資料 API 服務提供給業務方。
02 資料中臺提供了什麼價值加強內部協作:當不同專案需要開發不同應用時,由於專案維護分屬不同專案組,開發人員無法將之前資料直接拿來用,所以資料還是需要再開發一次。資料中臺的出現,可以解決重複開發的問題,加強內部專案及團隊協作。
提升業務效率:資料開發週期往往數十天甚至幾個月,無法跟上業務需求的快速變化,例如增加應用報表、獲得使用者資料等都需要較長時間,無法真正開發資料的價值。資料中臺通過對資料的歸集、清洗、處理、共享,大大提高了資料應用價值,提升了業務效率。
彌補資料開發人員數量的不足:很多企業注重應用開發模組,忽視了資料開發建設,資料中臺的建設可以進一步加強對資料的處理和維護。
資料價值變現:以使用者為核心,通過持續規模化創新,盤活全量資料,提升企業的業務響應能力,啟用企業資料思維。在資產價值挖掘過程中,業務經驗不斷豐富和沉澱資料資產體系,持續優化業務能力。
03 什麼樣的企業需要構建資料中臺不是所有的企業都需要構建資料中臺,企業所處發展階段、業務型別、對資料價值的訴求、人員和業務規模都是影響其是否需要建設資料中臺的因素。如果企業沒有結合自身實際,盲目投入資料中臺建設,則可能造成成本的鉅額提高,而業務水平沒有有效提升,不利於企業長期發展。
那麼,什麼樣的企業需要構建資料中臺?(如下圖總結)
04 怎麼構建資料中臺企業構建資料中臺,不僅僅是產品架構的問題,更是整體組織架構、部門協調、業務整合的規劃,通常來說,構建資料中臺需要經歷以下五個過程:
05 資料中臺行業發展狀況行業落地現狀從市場端來說,多業務生態的大型規模公司更傾向於自建資料中臺。例如,除阿里以外,國家電網也提出建設總部資料中臺,以支撐其“三型兩網、世界一流”戰略目標。
國網:資料中臺建設的核心是實現國網大資料在各部門各環節的共享與應用,通過資料探勘提供跨專業服務。國網大資料中心已經制定資料中臺建設的周密方案,從技術、部署、元件測試、實施等方面開展工作,從而保證該專案的成功落地。
從供給端來說,不少大資料公司陸續開展了資料中臺業務,準備在這個“新”市場中分一杯羹。
無論是原先做營銷SaaS的公司,還是做軟體開發、資料開發平臺的公司,都可以從自身優勢出發提供資料中臺服務。包括用友、華為、京東等紛紛開展了資料中臺業務的摸索。
用友:在2018年推出雲平臺業務,包含業務、技術、資料中臺三部分,為企業提供數字化轉型服務。飲料加工企業小洋人乳業已成為其資料中臺業務的成功案例,實現了成本降低、資料安全性增強的效果。
星環科技:基於Hadoop平臺的大資料、基礎軟體研發商,在Hadoop基礎上改造元件,開發資料庫,提供資料介面等;資料中臺業務也是業務發展方向之一,公司已獲得啟明創投、騰訊、中金資本等眾多機構投資。
TalkingData:圍繞SmartDP資料智慧平臺(即資料中臺),為企業搭建資料智慧應用生態,資料驅動業務發展,幫企業實現資料商業價值,目前已在金融、智慧家居、零售等領域積累豐富經驗。
明略資料:2019底,明略提出“打造智慧時代的企業中臺”戰略,以知識圖譜為載體,為行業客戶提供智慧資料服務,建設資料中臺和業務中臺,實現企業資料協作共享的目的,為企業資料應用搭建技術體系;目前已經積累了寶潔、華為等資料中臺服務案例。
資料中臺9家創業公司融資盤點
自資料中臺概念出現以來,不少創業公司湧入賽道,明確提出資料中臺業務。根據資料統計,對9家創業公司進行盤點。
數瀾科技 國內最早資料中臺服務獨立供應商
2016年中成立,創始人風劍(甘雲鋒)是原先阿里資料中臺部門的骨幹負責人,業內經驗領先,團隊來自阿里、金蝶、華為等。其資料中臺業務不只是為企業提供工具,還會對企業戰略、組織架構進行全方位梳理,提供頂層設計服務。
2016-2018年已累積中臺客戶數十家,包括萬科地產、中信雲網、興業銀行、喜茶等。以中信為例,其痛點是整合複雜的業務條線,發揮內部協同作用,不只是工具的問題,還需要組織戰略的調整,數瀾在這一點上做得很好,為中信提供了資料交換整合、資產化、業務化三層服務,解決了其核心痛點。
滴普科技 資料中臺助力醫美等門店數字化轉型
2018年成立,深耕醫美、新零售領域,以大資料、人工智慧技術為企業整合供應鏈,“業務中臺+資料中臺+AI中臺“賦能企業供應鏈、生產營銷等環節。典型案例有秀域,國內大型健康減肥、醫美連鎖機構,助其實現數字化轉型。
熵簡科技 全域資料中臺服務商
2017年成立,通過資料分析與挖掘,面向金融、諮詢等企業提供智慧投研服務,隨著產品及業務升級,為客戶打造全域資料中臺,提供智慧資料服務,引領企業資料中臺引擎應用。
奇點雲 AI驅動的資料中臺創導者
以雲端小鎮和新零售為切入點,為政府治理、傳統企業數字化升級提供服務。其自研的一站式大資料智慧服務平臺DataSimba,能夠為企業提供全鏈路的產品+技術+方法論服務,可以幫助企業快速開發、整合、搭建資料中臺。
袋鼠雲 一站式資料中臺PaaS服務商
基於阿里雲IaaS基礎設施,為客戶進行定製化服務,構建資料中臺架構,提供整體數字化解決方案,行業覆蓋鞋服、地產、新零售、乳業、綜合性集團等。
維妥科技 直播電商資料中臺服務商
圍繞直播電商客戶,通過資訊收集,自研資料中臺技術,為內容電商提供營銷服務。團隊成員是技術、資料分析背景出身,來自百度、聯想等知名企業。
數列網路 基礎行業資料中臺研發商
公司以網際網路架構和技術為核心,為電商、物流等行業客戶開發資料平臺,資料監控與分析平臺、運維平臺等,提供資料中臺解決方案。
數獵天下 資料視覺化分析服務商
以探索式資料分析技術為核心,為企業提供易用、視覺化資料產品,目前已經積累了人民日報、三一重工等數十家客戶案例,為企業提供企業級資料中臺服務。
維格智數 輕量級資料中臺服務商
公司由前喜茶CTO陳霈霖創辦,主要針對政府、新零售等行業,提供全鏈條數字化升級服務,以輕量級資料中臺的搭建,實現企業經營、管理、營銷的全方位數字化。
06 資料中臺行業發展趨勢搭建資料中臺需要與公司戰略、組織架構相協調
資料中臺是隨著企業業務態勢發展多元化,原先的組織架構、發展戰略已無法跟上企業需要而產生的,如果沒有系統的配套變革,單靠一個數據中臺很難真正發揮作用。
一方面,需要對企業內部架構進行整合,形成業務中臺,為資料中臺發揮價值提供基礎,沒有業務中臺的支撐,資料中臺的構建就會很難、發揮作用也有限,只有建立起成熟的業務中臺,資料中臺才能夠形成正向迴圈機制;另一方面,還需要從公司發展戰略、部門設定、員工配套等入手,從整體上實現企業戰略轉型,才能真正使得資料中臺在企業落地。
資料中臺未來可能形成寡頭局面
從資料中臺本身來講,其可能是一個比較小的賽道,但從其延伸出來的智慧資料應用、企業組織架構、戰略諮詢業務來看,是一個很好的切入點。這個領域的玩家除了近幾年成立的創業公司,還有老牌的軟體巨頭如用友、金蝶等。
由於在垂直行業內,只有核心企業具有大規模業務和資料量,才有構建資料中臺的動力,其資料中臺的應用場景具有天然優勢,所以只有抓住垂直行業核心心企業的資料整合需求,才能最大化發揮資料中臺建設價值。
未來,少量企業通過樹立行業標杆客戶,從而吸引更多客戶,可能形成寡頭局面,還有少部分玩家爭奪定製化長尾市場。
推動產業鏈上下游數字化轉型發展
企業數字化轉型的路徑從最初的建立資料庫,到加強資料應用、資料分析,再到建設資料中臺充分整合資料,資料對企業的價值和作用越來越大。
資料中臺不僅有利於企業與使用者之間的互動,還能夠更系統地完成與產業鏈上下游企業資料的對接,促進產業鏈中生產、銷售各個環節的數字化轉型,提高行業整體效率。
AI發展帶動資料中臺建設智慧化
建設資料中臺,最終是為了實現資料的智慧化、簡易化、可用化,除了IT技術外,人工智慧的發展會將提高資料中臺的便利性和高效性,與影象識別、演算法、自然語言處理、專家系統等相結合,能夠輸出一套資料應用方案。
在資料中臺底層嵌入人工智慧技術,將有利於對資料標準、資料關係、資料治理的分析應用;業務與人工智慧技術的結合,也會推動資料中臺智慧化,更大程度發揮資料中臺作用,推動行業創新,加快行業發展。
資料中臺能力與物聯網智慧採集終端相結合
資料有內部的和外部的,歷史的和新增的,沉澱的和活躍的,資料中臺可以對資料進行重構,加強對資料的處理和分析。隨著國內物聯網智慧採集終端的發展與成熟,物聯網採集終端已經擁有了眾多的應用場景,比如智慧城市、智慧家居、智慧可穿戴裝置等。其可以對資料進行實時和連續採集,之後上傳到資料中臺,實現資料形式的轉換,豐富資料總量和型別,通過資料分析、資料探勘,為業務決策提供輔助依據。
最終,將會形成一個數據來源豐富多樣、AI結合底層架構、資料應用更加簡單的資料中臺商業閉環,推動產業數字化轉型和行業智慧化發展。