艾瑞咨询：2022年中国数据中台行业研究报告-20221102

中国数据中台行业研究报告 ©202.1 iResearch Inc. 本 报 告 来 自 互 联 网 公 开 渠 道 ， 版 权 归 原 作 者 所 有 。扫码查看更多报告如 有 疑 问 ， 请 联 系 data@01caijing.com扫码查看零壹报告 2©202.1 iResearch Inc. www.iresearch.com.cn 摘要 来源：艾瑞咨询研究院自主研究绘制。 云原生是当下最为确定的技术趋势，存算分离、微服务、ServerLess等核心技术要 素驱动数据中台走向云原生。数智融合理念将AI算法模型植入数据治理，高质量数 据反哺AI开发能力，让数据和AI开发高效互通。泛中台化趋势明显，业务场景需求 的解决方案/产品趋于“中台化”，以数据中台为基础的中台体系不断丰富。 狭义来看，数据中台是一套实现数据资产化和服务复用的工具；广义来看，数据中 台是一套运用数据推动企业数字化转型升级的机制和方法论。数据中台始于业务数 据的沉淀 ， 于数据的 、 合、分 ， ， 生 。 当 数据中台的 业 中 ， 业的 ¡分为 台生 ¢£、解决方案¢£⁄¥ƒ中台¢£§currency1，行业格局由竞争转向竞合，以协同生态 为核心，集众所长，将 的技术方案 业服务“«‹合，›fifl 解决方 案的广 ⁄– ，–†于金融、泛零售、政务、制造、工业等‡ 业 场景。 2021年数据中台市场规模达到96.9 。· ¶•， 业的生 化合‚趋势明显； ·需求•，„业”数据中台的»…‰ 中台¿ `´ˆ最˜的数据¯˘能力。 业 中 ⁄ ˙¨ ， ˚¸模 ˝˛ˇ，˛—趋于 ， 将·202 年达 到1 . 。 3 数据中台行业全景 2 数据中台产业实践3 典型企业案例4 数据中台概述1 行业前景展望5 4©202.1 iResearch Inc. www.iresearch.com.cn 定义 始于业务，用于业务，生态闭环，源源不止 数据中台是一 数 化 合解决方案。数据中台 、 算、存 ⁄ 理 量数据， 数据的 一⁄ 一¡， ƒÆ ª、 的数据存 能力中心⁄数据 产中心， 化服务模Ł，Ø高数据Œº⁄ 能力， 高 解决 台的 化需求。狭义来看，数据中台是一套æ˘数据 产化⁄服务 的 ；广义来看，数据中台是一套 数据ı 动„业数 化`型 ª的 ⁄方法ł。ø 数据 ¢œß，数据中台ƒ于业务数据的 沉淀， 于数据 、 合、 分 的生 。数据中台始于业务， 于业务， 的理念 数据 œß下数据 产 最 化的 ø 契合。 来源：艾瑞咨询研究院自主研究及绘制。 数据中台核心架构 数据 集 数据库日志数据 数据 用 网页及埋点数据移动设备数据物联网数据 事务性功能 HDFS MPP Spark Flink 数据 架构规范管理 数据治理机制 元数据管理 主数据管理数据分布 数据模型 数据标准 数据资产 资产目录 即席查询 在线查询 鉴权管理 数据服务 API服务 …… 分析型功能 数 据 运 营 管 理 数 据 安 全 管 理 5©202.1 iResearch Inc. www.iresearch.com.cn ©202.1 iResearch Inc. www.iresearch.com.cn 驱动因素：宏观层 数据量规模快速扩张，数字化进程加快，技术更新迭代 新冠肺炎疫情加—ı动ˆ ˚、„业到政府Æ方位的社会数 化`型浪潮。„业方面，疫情的出˘为„业数 化`型按 下ˆ“加—键”，·线办公、·线交易等线¨化 营方式为„业·特殊œ期 正常 `Ø ˆ支撑。政府方面，政府 的数 化 急能力⁄·线政务服务能力·疫情下不断“淬炼”，·线服务指数由Æ球第34位 至第9位，迈入Æ球领先 列。据Gartner 测，2025 年Æ球将有309亿设备接入物联网。物联网设备产生 量数据，”这些设备的 营、监控以 安Æ 障，离不开 数据技术的支撑，反过来也ı动ˆ 数据技术的进˝。云 算以 云 算 境下 数据技术的 ， 使构 一套 数据系 ¯为 门槛、快—启动的项 ，且随着业务˛ˇ进 无缝的技术˛ˇ，只需为æ际使 的 算⁄存 ， ˆ使 门槛。 来源：wind，艾瑞咨询研究院整理及绘制。来源：wind，艾瑞咨询研究员整理及绘制。 2005-2021年中国数据经济规模及全球占比 22 32 49 64 83 92 99 101 114 3 5 10 16 27 31 36 39 45 12% 15% 19% 25% 33% 34% 36% 39% 39% 200520082011201420172018201920202021 国内生产总值（万亿元）中国数字 规模（万亿元） 中国数字 规模 （%） 2015-2030年中国数据量规模及全球占比 3 12 49 175 23% 24% 28% 29% 201520202025 2030 中国 数据 （ ） 中国 数据 全 （%） 6©202.1 iResearch Inc. www.iresearch.com.cn ©202.1 iResearch Inc. www.iresearch.com.cn 驱动因素：行业层 大数据核心技术和产品受关注程度高，产业发展再升级 数据技术⁄ 为 支撑，是 数 “ 新 势、加快数 社会 设˝ 、Ø高数 政府 设 的 要力量， 数据核心技术 新⁄产品 ª »… 高，产业发 备 的 ⁄ 力。随着5G、AI、物联网 等技术的 ，数据 场景 ，数据 不断 ，数据量快—¡ 。云原生技术使„业 ¢能·公Œ、£有⁄ ⁄合云等˘ß动 境中构 ⁄ ¥ 的 ƒ，是§云 算currency1 ，数据 设“领 æ˘新˛ˇ的 要«‰。· ‹ 方面，数据中台、数据治理、数据安Æ等产品›领fi分fl场发 。· ‹ 方面， I、 –化、†‡分 等产 品也备 »…。 „业⁄ 业 来看，„业·加… 数据技术´ fi化 营、¶•化决‚„进。 业 ”»于‹ ⁄¶•技术服务、…联网等领 。 来源：工信部，艾瑞咨询研究院整理及绘制。来源：工信部，艾瑞咨询研究院整理及绘制。 2014-2021年软件和信息服务业收入增长情况2020-2021年月度互联网业务收入累计增长情况 37026 42848 48232 55103 61909 72072 81586 94994 16% 13% 14% 12% 16% 13% 16% 20142015201620172018201920202021 务 （亿元） （%） 29% 29% 28% 24% 26% 26% 25%25% 23% 22% 21% 5% 2% 5% 15% 14% 15% 14%14% 13% 13%13% 1 2 1 3 1 4 1 5 1 6 1 7 1 8 1 9 1 10 1 11 1 12 2020 （%） 2021 （%） 7©202.1 iResearch Inc. www.iresearch.com.cn 驱动因素：企业层 搭建全栈式的数据功能集成平台，发挥数据资产价值 „业的数 化进 不断加快。„业‰ ⁄¨下¿currency1 的合‚ 来 `´ˆcurrency1数据 台⁄数 化 ，˜¯ 新的˘‰⁄ ˙‹。一方面是¨ 一的业务系 ˚ ，数据¸式⁄› ‡˝化，˛¡数据ˇ以— ⁄ ， 一方面是¨ ¨ 下¿„业分º数据⁄A I服务的 ˚ 。 ，中 SaS·疫情 发 来ˆ高 œ ，˜„业系 ·‡云 境中， £有 量业务系 云 系 ˆ 的»系，最˜无法快— 业务需求， 业务 新。„业需要 一 一的数据Æ能 台， 一的数据 产，Ø 一的数据服务， 化开发，ª ，æ˘业务系 ›fi⁄业务 需求ª ， 正æ˘“ 数据 产发 ”。 来源：艾瑞咨询研究院自主研究整理及绘制。 数据功能的集成化 数 据 功 能 集 成 化 •业务系统集成途径不统 一，重复开发现象严重， 效率低下； •数据服务接口标准不统 一，扩展能力差； •数据治理标准不统一， 无法进行全域数据治理； •业务需求响应不及时， 创新能力差，效率低。 •业务系统的集成结构和 服务关系清晰； •数据服务接口标准统一， 开发效率高； •数据治理标准一致，可 做到全域数据全生命周 期的治理； •业务系统协同，可实现 敏捷开发。 的数据 集 台 复 的集 系 8©202.1 iResearch Inc. www.iresearch.com.cn 价值 核心价值：提升数据治理，改造业务流程，深化数据应用 来源：艾瑞咨询研究院自主研究及绘制。 数据中台¡力于解决原有数据»系 S AŁ构解决„业“数据ØŒ”º ， 数据 ， 过 æ数据 ˚系、 化 数据质量 控、 一 理 数据等方式加 数据治理，Ø 数据 ，æ˘数据 产化。数据中台·ı „业业务 ， 数据 ł的fiœ，也 ˆ„业 门 ⁄ø业œcurrency1 的业务 ł，ß “ 门 ”产生的 ，极 Ø ˆ„业 ¢ 。数据中台的设 定位是 于„业的顶层 ， 中˚˘ˆ„业的顶层框Ł⁄业务逻辑。数据中台”„业Æ 数据 产进 开发⁄ ，æ˘ˆ 一 比 算， 数据 备ˆª 服务能力，满 ˆ„业ˆ层ª”数据服务能力的智能⁄快 —调 ， 数据 最 化赋能业务决‚。 数据中台核心价值 运用可共享复用的数据管理工具进行数据治理，形成统一的数据标准，并结 合可视化工具，提升数据质量和数据管理效果。 升数据 加强数据与人工智能的 合，运用数据 法 ，加强数据 的全生命周期治理， 法 ， 数据开发周期。 丰富的 法模型 构 用的数据服用，并进行可视化 理，提升数据 和服务的复用 ， 低开发成 。 开发 数据治理形成可用的数据 ， 低数据开发 ， 数据加工 理 的全应用 ， ¡应用提¢服务。 企业数据资产 数据£全 ⁄¥数据进行敏ƒ§currency1 “，运用数据加« ‹敏 ›能， 提升fi业的数据£全。 升数据 9©202.1 iResearch Inc. www.iresearch.com.cn 争议 搭台还是拆台，做厚还是做薄 来源：艾瑞咨询研究院自主研究及绘制。 随着„业数 化`型的–入⁄数据技术的不断ı陈出新，»于中台的争 也开始出˘，比如中台该做厚还是做薄等。艾瑞 过调研发˘，这并非中台¿ º ，而是不fiœ˚的语境不fi，»…‰不fi。首先，数据⁄指 ˚系 一¡ 的理念 不会ı¯，且数 化 –，其 明显。其次， 的理念不会ı¯，“ 轮子”· ‡情况下都不 允许。 再次，数 一˚、 的理念不会ı¯。而以¨§‰，正是数据中台的理念 ， 中台并不过œ。· ˚技术Ł 构、产品 ⁄£业模式¨，中台确需 œ俱进。首先，— 意义¨的广义中台将„业 理、 台 设、数据治理、数据 营， ˆ 一 的系 ，门槛 高，且任何一 出˘º 都ˇ以 正 Æ。随技术进˝，原来需要人 去做的很‡ø 项，都 以 ⁄产品ß替，· 能、Æ能、˚«均不¯情况下，中台¯薄ˆ。其次，中台¿ 也需解耦 分层，数据 汇”、治理为一层，为数据 理层；数据服务 为一层，为数据 层；安Æ、AI能力等，则纵跨两层。 数据中台的解耦与分层 数 据 安 全 管 理 主数据管理元数据管理数据模型管理 数据治理 数据汇聚 离线同步实时接入 异构数据可视化配置 数据标准管理 数据¡ 分析型功能 数据应用 数据服务 鉴权管理API服务 在线查询即席查询 事务性功能 数据 用 数 据 运 营 管 理 AI 能 10©202.1 iResearch Inc. www.iresearch.com.cn 延展 技术与业务中台，支撑数据和应用服务 技术中台抽象、封装⁄沉淀公Œ技术 的 能力，以 台 式” 出技术能力。技术中台核心特‰为云原生⁄微 服务， 过A I网»æ˘ 逻辑⁄ 支撑的安Æ分离⁄¥ƒ开发，有 ”高频 量业务访º场景。技术中台的设 ⁄æ“只需 备技术属 ，不能把业务逻辑封装进去，否则就偏离ˆ技术中台能力抽象 出的¿质。 业务中台承载„业核心业务，æ˘„业ª的业务能力 ⁄业务板Ł›fi，Ø 新 能。业务中台的典型特‰是涉 领 ‡，需求¯化快，业务场景逻辑 。·设 ⁄æ“中，需要划分业务领 边界， Œº服务模Ł， ƒ分布式微服 务˚系，为 台 Ø Œº服 的业务能力。 ，也有观‰认为业务中台偏ø务，数据中台偏分 ，˜·¿报告中，数据中台的概念¿ 已包括ø务 需求。 来源：艾瑞咨询研究院根据公开资料整理及绘制。 中台基本能力架构 技术中台关键组件 技术中台 业务中台1 数据中台 数据采集 数据应用 数据开发 数据服务 业务中台2 业务中台3 后台系统 前台应用 开发框架 基础能力 运行环境监控预警…… 用户权限 公共服务能力 流程设计模型服务…… API网关 服务鉴权服务路由 ……降级限流 前端开发框架 微服务开发框架 开发框架 负载均衡 微服务治理 流量控制配置管理 配置中心服务发现…… 业务中台关键模块 共享服务模块 用户中心商品中心 订单中心交易中心 会员中心店铺中心 评价中心支付中心 物流中心搜 中心 ……资 中心 11 数据中台行业全景 2 数据中台产业实践3 典型企业案例4 数据中台概述1 行业前景展望5 12©202.1 iResearch Inc. www.iresearch.com.cn 市场规模 行业增速有所放缓，市场规模稳步增 来源：艾瑞咨询研究院根据 公开资料 及自 及绘制。 我 数 “ 蓬勃发 ，„业数 化`型˝ 不断加快，数据技术加— 新融合 。2019年是数据中台 年， 业快 — ˆ萌芽期⁄ ˇ期的 ，正· 极´ 期过渡。 ¶•看，生 化合‚趋势明显，一方面云¢£·ˆ垂直领 加—布局合‚生 ，配合生 伙伴的 业 淀⁄服务›fi，使得 化 署能力⁄æ“ 率显著Ø ； 一方面， 分 ¥ƒ¢£融合云¢£的 层 台能力，‹合 的技术 新⁄ 项 势，发布‡˝化的数据中台产品。·需求•，„业” 数据中台的»…‰已 中台¿ `´ˆ最˜的数据¯˘能力，”中台的理解不断加–，需求也·加明确。 ，·疫情 下，„业的 ¸ª ¨ ，驱动¢£ 极 业务模式 新⁄服务 ª。数据中台 业的 中 ⁄ ˙¨ ， ˚¸模 ˝˛ˇ，˛—趋于 。 2019-2024年中国数据中台的市场规模 37 8 68 2 96 9 126 0 156 2 187 4 80% 42% 30% 24% 20% 2019202020212022 2023 2024 数据中 规模（亿元） （%） 13©202.1 iResearch Inc. www.iresearch.com.cn 产业图谱 行业 发， 放，市场 来源：公开资料，艾瑞咨询研究院整理及绘制。 些年，· 数据、云原生、人 智能等技术发 ⁄„业数 化`型加—的 驱动下，数据中台·‡场景快— 。 ¢£currency1型来看， 台生 ¢£、解决方案¢£、¥ƒ中台¢£以 研¢£的边界开始模 ，数智服务的生 ›fi明显。 fl场¸局来看，云服务¢£` 备的服务˚系⁄ 生 能力， 出方法ł、技术 ， ƒ 业服务˚系；产品¢ £ 新技术能力⁄垂直 业–入的业务认 ， 得 业 ，Ø 品 争力。 数据中台产业链生态图谱 数据中台厂商类型 平台生态厂商 解决方案厂商 独立中台厂商 自研厂商 14©202.1 iResearch Inc. www.iresearch.com.cn 行业格局 ， 搭 提升数 服务，生态 ¢£发 逻辑正 争`´ 合，以›fi生 为核心， ˇ，合力fl ›fi 解决方案的广 ⁄– 。 台生 ¢ £ 有‰ 率先 中台 ，currency1 ” Ø 服务的先发 势，为 业发 出方法ł、技术⁄ ˚系，£业模式以 “Ø 云 服务，生 伙伴æ“交 ”为 。解决方案¢£ ˆ 的垂直 业服务“«⁄ 服务 ， 快— 确 „业业务 ⁄˘‰需求，˜项 æ“交 一 需要 Ø 数据能力支 。¥ƒ中台¢£核心技术 来 业 ¢£，技术 景 æ， 业“«过¡，˜品 力ø比 台生 ¢£ ¢。 来源：艾瑞咨询研究院自主研究及绘制。 数据中台厂商生态 生 中 ¡¢£ 协同生态 ⁄¥ 提出中台建设需求 提供云基础和咨询服务 中台实施交付 输出技术 工具体系 作为生态伙伴参与 大型项目 中小型项目 独立提供中台建设 ⁄¥ 数据能力 （非必 提出中台建设需求 中台实施交付 15©202.1 iResearch Inc. www.iresearch.com.cn ©202.1 iResearch Inc. www.iresearch.com.cn 行业挑战 产品化和 的平 ¡¢ 来源：艾瑞咨询研究院根据公开资料自主研究及绘制。来源：艾瑞咨询研究院根据公开资料自主研究及绘制。 ·£融 领 ，SaS理念 ‡£ 人 ⁄¥。是否云¨ 署，是否ƒ§且高˙currency1，是否 开，是“断SaS属 的 要指 。当 ，中台以服务中 型 为 。 的 数据量 ”数据安Æ的特殊要求，˛¡ Æ公有云的 署 模式， ‡ currency1项 «‹一次 ⁄£有ƒ§›的 式。并且，中台fi其是业务中台 分，需要” 业⁄ 有 – 理解，·指 ˚系fl 、数据 模等 ，常需–†方– 配合，如‡ 心做 产品，则·£ 等 并不· 势。不 是 业 ，还是£ 人，都要–入 ¶•如何·产品⁄£业模式¨下Æ‚，以„求 边际 ¿⁄满 定 需求的 ”。 »ß…的技术理念， 核心研发‰‡ 业交 的 ¢Ł构， 极发 生 合‚伙伴， 分开 生 等， 都是 ¶的¿项。 低零代码核心能力 1数据模型¢动 ƒ§页currency1 “«¢‹›fifl –模型†‡«· †‡模型字¶• ‚„数据”fl„联 “«»及模型规…‰ ¿« `´ˆ˜¯ fl˘⁄˙数据模型fl‹¨ “ 2 3 4 £⁄¥ƒ ˚¢currency1¸ ˝‰˛˝ˇ— fl « ˚¢currency1ƒ § ¢ – 务 Æ « ª«ƒ§API ¢ŁØ‰服务«¸´ˆ˜¯ fl˘⁄ ›fiŒ⁄ 体化 § º ˇ—Œ • º “«æ能 ı« “ łø—布 产物 œ˛«´ˆ˜¯ ß 动构 — 布 线•免运费»及配套监控fl˚站 能 £currency1化开发 务人员在可视化页currency1内ƒ§托拉拽fl¢ 形 ˝ 交互« 而配置˛˝数据源‰数据模型«†‡并执–工“ «质 ƒ§可视化界currency1生 了可执–fl计算机 研发 核心 核心研发+多行业交付的组织架构 零售 金融 地产 政务 制造 …… •控制开发成本，提升厂商ROI：ƒ§研—核心抽象‰沉淀产品研 —能 « 升产品基础侧fl稳†性•拓 性‰适˘性«在 改 变产品原æ基础功能fl 下«节约 研— º 同时«ƒ §与企 IT部门•技术架构师 协Œ«与技术强fl生 伙伴合“« 制†科学合理fl部署¢£«»合理fl投 获得œ大 报 16 数据中台行业全景 2 数据中台产业实践3 典型企业案例4 数据中台概述1 行业前景展望5 17©202.1 iResearch Inc. www.iresearch.com.cn 需求诊断 £业搭建数据中台应 ⁄¥所ƒ，量§currency1 来源：艾瑞咨询研究院自主研究及绘制。 随着技术进˝，中台æ“ˇ `´ ，˜ ˆ不是 有„业都˜合中台 设。中台汇”、 的特‰，要求„业已 “¯ ·˘来 ˙œ ‰会有 量的数据 ⁄ 。如‡„业˚量不 ，¯ „业˚量¨ ˜业务 数 ，·数据需 求出˘œ，一”一 解决， 能 比·高。中台 的特‰，要求„业业务˚不是 Æ一 不¯的，也不是‡业务线¸ 无»联的，如‡„业业务非常 定 ˝无¯化，则中台 设的˛要 不 。中台为 ˚解决方案的特‰，要求„业有ø 的配套 ，包括„业 、 ¢Ł构等，如„业ˇ有 门的数据 门— 业务 门，则„业数据 设 易 入“公 ”• 业务 门都 使 数据，˜ 都不 、 设、治理数据。 currency1，中台是一 设“，其以 层的 障¨层的ª ，以公Œ的 设 障ˆ业务线的使 ，以当 的 £入 障˘来的高产出。 „业不是 currency1¸划的，均不 Ƙ合， 以 中台 的 模Ł如数 、数据Ư 数据治理等先 解决当 º 。 企业是否引入中台的考量要素 “化«‹数据›fi 业务fl –†模‡· 机制¶•‚ 企 信息化 设 度已达较高水 « 务 营由 多个信息ŁØß 撑« 壁垒明显 企 已 或未来 较短时间内æ大 fl 务数据 «˙数据资产 值 化 高 企 构 度高« 部 门协“ « 已 显 łø 企 度— 企 æ 较 fl配套机制« · 企 • 化•数据 部门 度 企 æ多 产品 线或 « 多元化 营 部门˙ 线 分析¡ 企 务 全˚ 变« ¡¢æ£⁄性 变化« 务线 ¥间惄联 18©202.1 iResearch Inc. www.iresearch.com.cn 整体分析 “字«‹›fi，fl –†‡ ·†， ¶ •¶ 来源：艾瑞咨询研究院根据公开资料自主研究及绘制。 中台项 æ“ˇ‰，·于„业数 化过 中， æ‹合不到位。— ª 常 ŁØ Œn 法，˜ 是 «¸划›有ˆ， Ø Œn« ›ºˇ，常 为“¨ ⁄ ”。 技术出 的中台¢£则需 ŁØ Œn 的方法ł。 ， ‡中台¢ £·为„业Ø 服务œ，‡ ¸划到 ¢再到 的 ¨而下 法，这其中要æ ª ，要æ生 合‚ 。 „业首先要明确 的使 、 景« Ł e›⁄当 况«AsŁIs›，ˆ 确定„业接下来一ıœ 的 极 指 ，ˆ 将 该指 ł分为子指 ，ˆ 确定数据 理⁄ ˚系，最 ø是中台 ˚œ线。一开始这些看¨去 “ ”的动‚，其æ 是中台能ß定、 ˙ 下去˛不 的要素。这 方式，其æ 以看 是“ 原理”以 “ R”·数 化`型中的 ˚ 。 以，„业中台 设不—是技术º ，·是 理º ，是„业的一把手 。 中台 的 分 1 一 ˇ有固定方法， 要 看 始 情怀例如• 以数智能力赋能业务， 数据驱动的智能„业 业务·加智慧。 2 分 汇 ⁄筛¿业‰ 要分 方法•SW 分 、 链分 、波特五力分 、 波士顿矩阵分 、 ŁR‚ 分 等。 3 极 指 «SMAR )•S= 象化；M=”量 ；A= ；R=ø» ； =期限明确。 4 企业架构 „业Ł构的Æ球 GAF• 划分„业的四 »键领 ；定 义„业业务 ⁄ ¢；记录 数据 产‹构 数据 理 。 5 19©202.1 iResearch Inc. www.iresearch.com.cn 核心方法论 ‚„”»…‰… ‚„”¿” `´ˆ” ‚„”˜» 的 台生 ¢£·‰ 中台 ，获得检« ” 出 的中台 设核心方法ł• neØata‰ neService‰ neIØ。„”»…‰ ‰的¿质是构 算法定义、数据研发到数据服务的 一指 ⁄算法，数据 、汇”、清洗、加 、调动一次 ，避免 不fi的业务场景 不fi 门”数据的 设， 数据 为 、 –挖 的 产，而非拖垮业务ı进的隐 ¿。„”»¿» `´ˆ»的¿质是数据即服务。— 数 不fi的系 调 数据œ 数据库权限限 ，需要开发人员定 不fi的访º接 ，出 œ还ˇ以追溯 到哪些 ⁄报表。数据中台 过 台化 的 /接 ，一方面为 开发屏蔽ˆ 层数据存 ，Ø 数据查 一接 ， 一方面Ø高ˆ数据 的 理 率， ƒˆ 报表到 的清晰链œ，Ø 数据开发的友好 。 来源： ，艾瑞咨询研究院整理及绘制。 + + ¡¢ OneID One Model One Service OneData OneModel统一数据构建管理 规范†‡ 模«构 数据资产： ا化currency1标† “ Ø设计«生currency1标“ Ø基‹数据分› OneService统一数据服务 ⁄而fi 制数据： Øfl fl主– 数据服务“ Ø˚†查询‡· AP‡在线服务 Øfl 多源¶构fl数据服务 OneID统一数据萃取 •‚„”‰标»生产： ØID 动化•‚‰„”“ Ø–¸元…‰–¸规…“ Ø标»生产 效率 Ø大数据•‰服务•高可⁄ 技术ˇ—门 ¿´“ Ø研—‰运 `时¿«研— ‰运 ´ 升 成本 ؈˜ ˇ—形 fl数据¯˘ ˙„”«人 º¿´“ Ø数据能 ⁄ 升«资源 º¿´ 质量 Ø数据Ø˚治理能 ¨强«数 据稳†性得 æ “ Ø数据˚˚性•及时性‰准¸ 性得 升 20©202.1 iResearch Inc. www.iresearch.com.cn 厂商选型 ¯˘˙¨˘ ¨˚¸ ˝量 来源：艾瑞咨询研究院根据公开资料自主研究及绘制。 „业·中台¿型œ， 人、 儿、ø儿§方面进 ¶量。“人”是指•„业 该¶虑中台¢£的 景，如是否有 数据 景，是否有 业 景。“ 儿”是指• 中台¢£的产品中，哪些是开 的，哪些是 研的；如‡是开 的，是 否是 且ß表˘来趋势的技术œ线；如‡是 研的，核心 势·哪， 开 产品的语法、˚«等是否一¡，会不会为 带来ø I 人ø的¨乏；ˆ 模Łcurrency1 是松耦合还是紧耦合；产品的使 门槛是否 ，˚«是否良好。“ø儿”是指• 中台¢£·历史¨，是否有¿ 业的 Æ案例， 得ˆ哪些显著 ‡；中台¢£ ¿„业的其他系 «如ER 、CRM等› 是否有 Æ的”接先例， 而·æ“中 以Ø高 率并 风险。 中台£⁄考量要素 ˜¯ 产˘ ˙¨ 主 ˝ 中 ⁄‹ 部署中 fl产品‰技术« ˛ˇˇ源 ˛ˇ—«ˇ 源产品在ˇ源 flfi 度ˇ—«未来fl技 术 “˙‹ 或 研产品« ⁄门 «较ˇ源产品 fl 点或 `在 ¢currency1«未来fl可˜ 性‰ 度ˇ— 「活儿」 主 ˝ 中 fl Æ ª «· Æ 技术ª •– ª • 服务能 ø˘时´ ¢currency1 「人」 主 ˝ 中 在 中 ¡¢£¢currency1已 æfl标 ˛« 点 „ · ŁP•ØŁM 务数据«内ª部 设备数据fl˙” 「事儿」 21©202.1 iResearch Inc. www.iresearch.com.cn 数据管理机制 数据中台建˛ˇ始 来源：公开资料，艾瑞咨询研究院整理及绘制。 „业要 ØŒ式的‡系 ‡ 台´数据中台`¯， ƒ 一的数据 、 理、 算 服务 台， 一的数据 理 是 ，æ˘œ ¡ 分为五˝•1› ˚ ¸ ˝。„业 于 业务˘ ，梳理核心业务 ，做到研发、 、 物 、营销、财务、人力等ˆ业务模Ł的Æ覆盖，设 数据 理、数据质量 理、质量评 等ø» 理 ，并责任 到人。2›数据资产¡ 。支 产归属、 产分currency1、 产概览、 产搜 、 分 、血缘分 等Æ能，并Ø ‡¸式 文 的˛入/出。3›数据˛ˇ¡ 。支 ¶•Ł构 理、模板 理、逻辑 模、维 模、模型物化、 校«以 发布 fi˝等Æ能。4› 数据¡ 。 数据 理是 数据 ，æ˘数据 一治理的 ，需包‹ 数据 、解 、 理、 模型 理、支 数据 示⁄搜 等Æ能。5›数据 ¡ 。需 备质量¸则，¸则校«、质量监控、¸则»联以 发布评 等Æ能。 数据¥ƒ§currency1 ¡¢ 设 œ 产 理 理 – 合企 务`Œ 设计数据管理 « º制数据管理 « 明¸数据 人 –构 Ø˚fl数据模 型•数据分布‰数 据 ¢£ –基‹ 务`Œ研« 规 设计核心 务 «⁄ 研—•营 æ•制 • 务• 同 务模 –ß ı 企 架构›fi设置多 数据资产flłø部 门« 部门与数 据 flłø„Ł« 并» –管理 –ß 数据资产ı ˚†fl分œ –管 理«可ƒ§ß型 构•网Œ 构 – 管理« † 数据资产 –ß ı 务 • 务主–• 务˙象• ˙象„Ł• 务 • 务ø性fl原 … 设数据标准 –ß ı 务 模 化管理数据标准 –ß Ł模型管理• 向数据库•主ª 键管理•分 设计• 临时”管理 数据 理 –将企 中技术元模 型• 务元模型• 数据元模型•管理 元模型 – 炼 管理«让企 部 门能够轻松•准¸ 找 ƒ fl数据 –具备元数据管理能 «查看‰ 护数 据字典详§信息• 具备数据血缘分析• łø 分析 功能 质量 理 –ß †‡常见数 据质 规…及 † ‡数据质 规… –ß 数据资产全目 录扫描•ß 质 告警及标•功能 –ß 创 数据质 监控currency1标«设†‚ „监控阈值«ß 数据质 告警 –模型ˇ—„联数据 标准‰质 规… 22©202.1 iResearch Inc. www.iresearch.com.cn 底座技术选型 —进 和 应 应 ˝ 来源：公开资料，艾瑞咨询研究院整理及绘制。 中台技术，即广义的 数据技术«中台≈数 化ª ‰ 数据技术‰数据治理 理‰数据 营›。由于 量 业 ，并 不能 玩` 数据， 以一 需要“ 到 ”的产品¯服务。 £Ø 到 服务，一 有 œ •«1›公有云 ¢£Ø IaS到SaS的Æ套的云、数、智服务，一 云 为 Ø ，而数⁄智˚ 以¿择云¢£ 有 ，也 以 ¿择开 。«2› 分¢£如Cl udera”不fi的 数据 进 合， CØH⁄CØ 套 。«3›解决方案¢£， 于 需求⁄ 理解，利 开 技术，进 由 合⁄ 次开发。«4›¥ƒ中台¢£， 于开 ‰ 研的方式， Æ链条产品⁄服务。«5›一些新型HA ¢£， 过” 数据的进一˝融合，以·轻巧的方式满 中 „业的中台需求。 ·技术 ¿择œ，一 遵 以下原则•«1›确有明显 势 ß趋势œ，¿择有 势的«如Flinkø”于St rm›。«2› 不fi技术ˆ有利弊œ，根据 业务、历史Ł构、 £ ˇ 合¿择。«3› £有– 研的， ˚« ，还 ¶ 虑 期服务的 ˙ 以 I 人ø的 ¶。 “的«数据‹› 大数据技术 集群调度 数据接入 Ø erne es Ø arn Ømesos Ø 据 Ø Ø 据 据 Ø¡¢ 据 Ø物£¡ 据 Ø⁄¥ƒ§ 数据存储 Øcurrency1 “«‹›fi Øflo –† 据 ETL任务调度 数据检索Øe‡as icsearch ؇ cene Øso‡r 数据分析 （OLAP) · currency1¶： Ø•r id Ø‚‡ic„ho se Ø•oris ”»currency1¶： Ø…i‰e ØIm a‡a Ø ¿‡in Ø res o Ø ar„ –† 数据计算 · ： Ø orm Ø ar„s reamin` Ø´‡in„ ”» ： ؈a Red ce Ø ar„ 23©202.1 iResearch Inc. www.iresearch.com.cn ©202.1 iResearch Inc. www.iresearch.com.cn 数据治理 数据 理 数据 理 来源：公开资料，艾瑞咨询研究院整理及绘制。来源：公开资料，艾瑞咨询研究院整理及绘制。 fi数据中心‹›架构 基于统一API访问的元数据服务层 数据血缘 消 息 处 理 血 缘 清 理 数据字典 连接管理器 DDB 接口 Oracle 接口 MySQL 接口 Nest 接口 结构化数据源非结构化数据源 数据特征 标 签 管 理 访 问 热 度 数 据 搜 索 MySQL Oracle DDBKafka Redis Neo4j fl数据¥ƒ –† 数据 理 于确 Æ局指 的业务 一¡， 要包‹数据 典« 数据的‹构¶•›、数据血缘« 于 分 ⁄ 障溯 ›以 数据特 « 数据的属 ¶•›。常 产品分为•1›开 产品Metacat« ˇ 理数据 典›⁄Atlas « ˇ 理数据血缘›；2›£业产品Cl udera avi at r。 数据中心” 一Ø A I访º接 ，数据— 、数据 †、数据服务等其他的子系 都 以 过A I接 获 数据。 数据 理 于Ø 、一¡、 确、ø 的 数据来 ，以支撑跨 门、跨系 数据融合 ，四 »键Æ能为生 期 理« 数据 的层次、»系 分 ›、质量 理« ƒ 数据质量 线⁄评 ı进 ›、›调Æ能« 数据 理系 业务系 ›以 分 Æ能。 要解决方案¢£包括I M、In rmatica、Sti S stems、SA 等 ¢， 产品 ，˜产品 ⁄¥ 不 ，fiœ ‰¢£如 友、浪潮等也· 领 ，不断 新，· „业需求。 1.制定编码标准 与业务部门共同确定主 数据范围，制定编码标 准，包括确定分类规范、 编码结构、数据粒度、 属性描述等。 2.编制编码内容 编制符合数据标准的主 数据代码库，包括数据 检查、数据排重、数据 编码、数据加载、数据 监控策略等。 3.建设管理平台 建设主数据管理平台， 实现主数据申请、主数 据管理和主数据发布功 能、数据清洗。 4.建立 管理流程 建立标准管理和编码管 理的运维组织架构以及 考核流程，不断完善主 数据管理流程和实现知 识转移。 实施方法论 24©202.1 iResearch Inc. www.iresearch.com.cn 数据资产管理 数据模‹ 理 fl 数据中台的¿质是构 „业公Œ数据层，把原先分 、ØŒ式的数 合并 Œº、 的数据中台， ˚æ“œ 概括为•1›—¡„…¿ ， 制数据 。 ØS是业务数据进入数据中台的第一 ，是 有数据加 的 ， 业 务系 的 数据库权限入手；2› 和 业务 ‹， 。 是业务过 的抽象 合，划分œ 量 盖 有业务需求， 定 ⁄¥ ；3› ƒ ‹。构 Æ局一¡ 的维表，确 维表只存一 。维 属 分为两 情况•公Œ维 属 特有维 属 ł 两 维表，产出œ ø 的维 属 ł分 ¥的维表；4›Æ 合 实ª。øæ表 合的核心是 ˛ 一¡，不fi 的数据不能出˘·fi一 øæ表中；5›模型设 ，进入模型开发。数据Æ生 期 理， ØS⁄ØWØ 能 有历史数据，ØWS/AØS/ØM需设 生 期， Ł30 不等； › 用 。进 数据比”，确 数据一¡。 来源：艾瑞咨询研究院根据公开资料整理及绘制。 数据模⁄分层架构 ADS数据˘⁄›ADS层 CDM层 DWS公共汇总› DIM 公共维表 ODS层 ·DS “数据› 公共数据层（· 公共明§›DWD‰公共汇总›DWS）« 负 数据¨工与整合• ˚˚性fl 度•构 可 ⁄flcurrency1 向分析‰Ø计fl明§事 ”»及汇总公共粒度flcurrency1标«主 采⁄ 度 模思路 –设计 C D M O D S 操作数据层« 构 与源ŁØfl 或 全 数据基º ˚«‚当‹数据准备 «承担基础数据fl记录及历史变化 原始数据 缓冲›（STG）¨载« 数仓fl 务数据›« 这˚›采⁄范 模«基º 与数据源 全˚˚fl 构« ˙‹变化fl数据« ⁄数据拉链¨工与存储 A D S 应用数据层«偏向˘⁄fl数据¨工«¡称数据 ›«这˚ ›设计‚˙›fi«贴近˘⁄«设计思想» 度 模¸主 25©202.1 iResearch Inc. www.iresearch.com.cn 数据服务 数据和应用 的 † 数据服务是数据中台的能力出 ，是数据 的