2021年中国数据中台行业白皮书.pdf
《2021年中国数据中台行业白皮书.pdf》由会员分享,可在线阅读,更多相关《2021年中国数据中台行业白皮书.pdf(44页珍藏版)》请在咨信网上搜索。
1、中国数据中台行业白皮书2021年22021.4 iResearchI摘要来源:艾瑞咨询研究院自主研究绘制。数据中台应用的业务领域和场景众多,其中营销领域发展最早,目前应用也最广泛成熟;而在管理会计领域,由于数据价值高且对经营决策意义重大,数据中台深化管理运营的效用明显。从行业来看,当前数据中台在金融和泛零售行业的应用和部署程度高,在政务、工业、医疗等行业仍有较大的发展空间。数据中台不是简单的一套软件系统或者标准化产品,更多的是一种强调资源整合、集中配置、能力沉淀、分步执行的运作机制,是一系列数据组件或模块的集合,为企业数据治理效率的提升、业务流程与组织架构的升级、运营与决策的精细化赋能。当前数
2、据中台行业集中度较低,公有云厂商、数字化解决方案提供商、数据与智能公司及垂直的独立中台开发商纷纷入局。但随着数据中台的技术架构和方法论趋于完善,现阶段建设的难点更多聚焦在如何将成熟的技术方案与行业及企业的实际情况和特征结合,即企业更需要厂商切身的咨询规划服务,以发挥数据中台的效能。2020年数据中台市场规模达到68.2亿元。随着企业数字化转型驱动,市场需求将持续增加,数据中台行业增长势头明显,市场规模快速扩张,预计将在2023年达到183.2亿元。SMS31234数据中台发展的驱动因素数据中台概述数据中台的行业发展现状数据中台应用的挑战5数据中台的未来发展趋势42021.4 iResearch
3、I2021.4 iResearchI政策推动企业信息化转型各行业陆续颁布核心政策,为信息化转型提供支持和引导顺应信息化时代发展,我国很早便部署了信息化发展规划,自起步以来,多呈现政策先行的节奏,为行业的转型提供了战略参考。近年来,随着5G技术和标准的发展,我国加快、提前部署各类基础设施,本着适度超前的原则,为企业的转型、创新提供土壤。简而言之,我国信息化建设紧密围绕着打造网络强国、建设数字中国、“互联网+”行动计划等国家战略,充分发挥信息化驱动引领作用,积极推进以物联网、云计算、大数据、人工智能、区块链等为代表的新一代信息技术与行业深度融合。各领域信息化建设紧紧围绕行业任务部署及关键战略统筹,
4、以新技术、新模式为支撑,强调网络安全保障能力的同时,积极规划产业进程,稳步促进信息化转型。2015-2020年中国信息化建设主要政策指导时间核心政策2015中国国民经济和社会发展第十三个五年规划纲要2016国家信息化发展战略纲要十三五国家信息化规划2017十九大报告2018政府工作报告工业物联网发展行动计划(2018年-2020年)2019十九届四中全会2020十四五规划方案中小企业数字化赋能专项行动方案关于构建更加完善的要素市场化配置体制机制的意见关于推进“上云用数赋智”行动,培育新经济发展实施方案关于加快推进国有企业数字化转型工作的通知关于深入推进移动物联网全面发展的通知2015-2020
5、年中国重点行业推进信息化建设重点政策统计注释:仅统计重要指导性政策。来源:中国政府网国务院政策文件库,艾瑞咨询研究院自主研究及绘制。注释:仅统计5个重点行业政策密集度。来源:中国政府网国务院政策文件库,艾瑞咨询研究院自主研究及绘制。积极推进“互联网+”提出建设数字中国5G+工业互联网22295634545425442221111241201520162017201820192020工业(个)卫生健康(个)农业(个)政务(个)教育(个)52021.4 iResearchI2021.4 iResearchI数字经济规模稳步扩张数字经济结构优化升级,对GDP贡献持续增强我国数字经济维持高速增长,在信
6、息通信新技术、新业态的带动下,传统行业焕发出新的活力,质量效益显著提升,2019年数字经济对GDP增长的贡献率达到67.7%,已经成为国民经济增长强大的引擎之一。数字产业化和产业数字化是数字经济发展的核心。数字产业化不断演进升级,与服务业全面融合发展后,正向实体经济范围拓展。产业数字化从单点应用向行业协同发展演进,利用数字技术进行全方位、全链条的降本增效,促进高质量发展,成为数字经济越来越重要的增长动力。“两化”协同发展,数字经济内部结构持续优化,为市场创造新动能的同时也带来了新的挑战,如何价值化数据并与传统生产要素融合,驱动传统产业向信息化、智能化转型升级,已经成为数字经济发展的关键问题,这
7、既是挑战也是机遇,所以加快推进数据价值化进程是企业发展的本质要求。18.622.627.231.335.827.5%30.3%32.9%34.8%36.2%20152016201720182019数字经济规模(万亿元)占GDP比重(%)74.7%77.0%77.2%79.5%80.2%25.3%23.0%22.8%20.5%19.8%20152016201720182019产业数字化(%)数字产业化(%)2015-2019年中国数字经济规模及占GDP比重2015-2019年中国数字经济内部结构来源:wind,艾瑞咨询研究院根据公开资料研究及绘制。来源:工信部,艾瑞咨询研究院根据公开资料研究及绘
8、制。62021.4 iResearchI2021.4 iResearchI665171019562120611146620162017201820192020互联网业务收入(亿元)客户为导向的市场环境企业向精细化运营、信息化经营决策改进近十年数字技术被中国消费者广泛接受,消费者对产品和服务的需求升级带动各类触点场景和产品延伸服务不断变化,迫使各行业在服务市场和消费者时需要充分发挥信息化技术的作用。此外,互联网以消费和服务为主线,与人们的生活场景深度融合,电商、媒体、金融等行业已经走在领先地位,逐渐多样化和个性化。快消品、地产、汽车等贴近消费者的行业也随之跟进,而传统制造行业由于行业特征、产品形
9、态、商业模式等原因发展空间相对较大。如今,在接入流量增速放缓,用户流量红利逐渐见顶的背景下,消费互联网的格局和竞争态势日趋稳定和饱和。如何促进企业内的人、物、业务、产品、生态以及企业与用户、企业间的互联互通,加速线上线下融合,推进资源与要素融合是企业发展的下一个方向。中台技术就是可行的解决方案之一,它实现了业务创新的基础保障,提供了技术平台和全网数据运营能力,为数字经济时代用技术解决商业领域问题提供支撑。942467111220149520162017201820192020移动互联网接入流量(亿GB)2016-2020年移动互联网接入流量增长情况来源:工信部,艾瑞咨询研究院自主研究及绘制。2
10、016-2020年互联网业务收入增长情况来源:工信部,艾瑞咨询研究院自主研究及绘制。72021.4 iResearchI数据孤岛林立的系统架构底层计算和存储架构的多源和异构形成系统烟囱和数据孤岛早期业务发展过程中,企业为了解决一些当下的业务问题,按照垂直的、个性化的业务逻辑部署 IT系统,各种信息系统大多是独立采购与建设的,与流程、底层系统耦合较深,横向和上下游系统之间的交叉关联也较多,导致企业内部形成多个数据孤岛,很难做到信息的完全互联互通。同时在新平台、新业务、新市场的拓展过程中,系统没法直接复用和快速迭代,产生的数据也无法与传统模式下积累的数据互通,进一步加剧了数据孤岛的问题。分散的数据
11、无法很好地应对前端业务变化,难以支撑企业的经营决策,因此亟需一套机制将新老模式融合,整合分散在各个孤岛的数据,形成数据服务能力。营销自动化CRM客户管理销售管理报表分析客服管理库存控制WMS库存管理自动收货上架管理交叉转运协同办公OA多维管理信息记录流程管理人事管理会计核算ERP财务管理采购管理分销管理生产控制功能重复建设,数据重复且不一致,烟囱型系统间的集成和协作成本高。数据和业务被分散在多个系统中,不利于业务沉淀和发展。基于老旧的技术体系构建的单体应用不能支撑现阶段互联网的高并发环境。金融零售前台业务IaaSIaaS数据数据数据数据大量数据被闲置、忽略,不能聚合成为有价值的资产。PaaS物
12、流文娱前台业务PaaS前台商业场景不断变化,企业无法打破原有的组织壁垒进行高效协作。传统企业的系统架构痛点来源:艾瑞咨询研究院根据公开资料自主研究及绘制。82021.4 iResearchI数据的价值化需求形成数据全生命周期的闭环为企业赋能近年,多数企业的认知已经从“跟风转型”过渡到“数据驱动转型”,认识到数据是企业的新型资产。而数据收集、存储和处理成本的大幅下降和计算能力的大幅提高,为数据资产化应用提供了经济环境基础。事实上,多数企业已经拥有了较好的数据基础,然而在现实情况中,并不是所有的企业都能获得显著的收益,其主要原因之一在于没有形成数据全生命周期的闭环,所以价值化数据的比例低,无法作为
13、关键生产要素为企业注入新动能。如今,数据资产化程度低、数据服务提供效率与业务诉求不匹配等“让数据用起来”的问题成为摆在企业面前的新型数字化转型难题。来源:艾瑞咨询研究院根据公开资料自主研究及绘制。数据生命周期形成闭环业务的快速上线和迭代试错,更加敏捷的面对市场,提供更多场景的服务,加速业务响应能力,为业务部门带来可上手的运行方式。前端新生成的数据可被处理分析,数据、流程与逻辑经过沉淀,形成数据资产,为后续服务和决策提供标准依据,实现数据全生命周期打通,进而推动业务创新。外部获取数据内部数据各端口数据业务系统采集 定义 清洗业务部门同步 联通应用场景数据产生数据定义不同,字段命名不规范、口径不统
14、一、算法不一致面向各业务线的“烟囱式”数据开发,浪费技术资源的同时造成数据重复且不可信缺乏全局规划,业务方获取数据途径繁杂开发周期长、效率低、服务响应速度慢重读建设导致任务链冗长、人物繁多、计算资源紧张、数据时效性不强上线容易下线难,源业务系统或自身变更不能及时反映到数据上数据治理使用可视化分析数据闲置管理数据使用能力的演进数据服务无法获得数据在应用场景中的具体价值和热度价值化数据无法复用数据链路割裂92021.4 iResearchI能力多、成本低、应用广的技术基础数据处理能力的演进为多业务场景的实现提供可能需求为技术提供了具象的场景表现,技术同时是各类场景实现的基础。首先,在企业业务多元化
15、、复杂化的形势下,大数据技术与业务场景的融合不断深化,企业不再满足于简单的业务数据统计与分析,而是需要提升数据的可用性,进行数据服务的个性化应用。其次,在运算能力方面,我国在终端和服务领域优势明显,随着5G和工业互联网等新场景的拓展,云计算、边缘运算、移动边缘计算等方案的提出和算力的提升让数据的时效性和分析能力有了更大的突破。例如传统的数仓设计受限于技术体系无法实现实时计算,而分布式大数据技术不仅能构建PB级别的数据中台,还能将实时计算与历史数据结合,实现流批一体开发。最后,人工智能技术与应用场景深度融合,配合机器学习算法,大大提升对异构数据的处理能力,让数据从接入、存储、分析、展现、训练到构
16、建管道都更加自动化,同时提高数据预测能力,充分赋能企业的经营决策。技术推动数据处理能力提升数据采集和清洗,统一数据存储、计算口径,提供报表、数据分析和可视化的能力。大数据技术确保数据运算的即时性与高效性,提供更高的灵活性,更强的可扩展性,是企业的降本增效的催化剂。云计算提升对异构数据的处理能力,与应用场景深度融合,实现智能预测、智能决策等数据分析智能化,将环节中的脑力劳动知识和经验沉淀下来。人工智能来源:艾瑞咨询研究院根据公开资料自主研究及绘制。102021.4 iResearchI传统组织架构的系统性问题传统组织架构难以适应信息化的发展环境职能型组织架构,项目性组织架构和矩阵型组织架构是现代
17、企业通用的组织架构,他们在支撑企业运营的同时也造成了一些系统性的问题。例如职能型的组织架构虽然使企业的部门专业化程度高,部门内部直线沟通、交流顺畅,但是也造成了:没有一个直接对接项目的负责人或团体,项目责任不明确。不以客户为导向。各部门由于只重视本部门的业务,而不重视项目整体和客户的利益,最终造成1+1项目/客户利益项目成员往往不将项目当作主要工作,积极性不高项目沟通和责任分散,对客户的需求反应延缓内部管理混乱111234数据中台的发展驱动因素数据中台概述数据中台的行业发展现状数据中台应用的挑战5数据中台的未来发展趋势122021.4 iResearchI数据中台的内涵数据中台居于前台和后台之
18、间,是企业级的数据共享、能力复用平台,是数字化转型的基础和中枢系统。将企业全域海量、多源、异构的数据整合资产化,为业务前台提供数据资源和能力的支撑,以实现数据驱动的精细化运营。数据中台不是简单的一套软件系统或者一个标准化产品,更多的是一种强调资源整合、集中配置、能力沉淀、分步执行的运作机制,是一系列数据组件或模块的集合,指向企业的业务场景。企业基于自身的信息化建设基础和业务特点对数据中台的能力进行定义,基于能力定义选择和利用数据组件搭建中台。各类数据技术是构建数据中台的基础,能够高效对数据进行统一收集、处理、储存、计算、分析和可视化呈现,使数据最终与业务链条结合,真正转化为企业核心资产。而从广
19、义上,数据中台更是一种企业组织管理模式和理念,集公司战略决心、组织架构、技术架构于一体,企业从战略上构建统一的协同基座即中台化组织,以协调和支持各业务部门,用技术拓展商业边界,为新业务、新部门提供成长空间。来源:艾瑞咨询研究院根据公开资料及专家访谈自主研究及绘制。是技术的概念,更是企业管理的概念数据产品的发展阶段数据库存储持久化,简单的关联查询,简单的OLTP系统,基本、日常的事务处理;不适用数据的多维度分析。位于多个数据库上的存储库。实现数据生命周期管理、主题域开发,提供直观易懂的查询结果,支持复杂的动态数据分析。数据处理能力较弱,在数据和业务预测方面应用有限。基于分布式的实时或者离线计算框
20、架,建立计算集群以运行各种计算任务,提供完善的大数据分析基础运行环境,提供统一二次开发接口等能力。支持多数据集实时同步、支持数据资产管理、实现多源异构数据的整合管控。数据迈向EB级别。具有全域级、可复用的数据资产中心与数据能力中心,在底层通过技术手段统一数据标准和口径,能够对接OLTP和OLAP的需求,结合算法,把前台业务的分析需求和交易需求直接对接到中台来,通过数据中台处理和逻辑运算。数据仓库数据平台数据中台132021.4 iResearchI数据中台的架构数据中台首先采集与引入全业务、多终端、多形态的数据,经过数据计算与处理,通过数据指标结构化、规范化的方式实现指标口径的统一,存储到各类
21、数据库、数据仓库或数据湖中,以实现数据资产化管理。向上提供各类数据服务,面向业务构建统一的数据服务接口与数据查询逻辑,提供数据的分析与展示,形成以业务核心对象为中心的连接和标签体系,深度萃取数据价值。来源:艾瑞咨询研究院根据公开资料自主研究及绘制。呈现统一基础层、公共中间层、多元应用层的分层架构模式数据采集业务数据第三方数据日志数据结构化数据非结构化数据流式计算.内存计算Kafka离线计算实时处理数据转换数据清洗数据计算数据存储分布式关系数据库分布式NoSQL数据库分布式文件系统传统数据仓库数据湖数据治理数据服务数据安全管理数据质量管理数据模型管理数据标准管理元数据管理主数据管理数据共享管理数
22、据标签数据目录数据地图数据分析算法模型服务接口数据分析与决策&业务智能应用资产价值化数据资产化业务数据化数据中台的架构142021.4 iResearchI数据中台vs业务中台相比数据中台抽象数据能力的共性形成通用数据服务能力,业务中台则是抽象企业各业务流程的共性形成通用业务服务能力,更多偏向于业务流程的管控。将企业的业务规则、流程、逻辑与业务进行隔离,整合封装成微服务、组件等前台友好的可复用共享的能力;将一切业务数据化,实现后台资源到前台敏捷复用能力的转化,提升面向终端用户的前台的速度和效率,提高整体业务的灵活性和响应速度。企业一般根据自身的实际情况需要进行数据中台和业务中台的规划和部署,当
23、企业同时拥有数据中台和业务中台时,两套中台起到相辅相成、相互支撑的作用。业务中台中沉淀的业务数据进入到数据中台进行体系化的加工,再以服务化的方式支撑业务中台上的应用,形成循环不息的数据闭环。但业务中台只是数据中台的数据源之一,而数据中台的数据服务也并非必须经过业务中台才能作用于业务。来源:艾瑞咨询研究院根据公开资料自主研究及绘制。各司其职,相辅相成数据中台vs业务中台基础技术/计算平台业务前台数据中台业务中台业务数据化数据业务化将业务数据化沉淀的数据通过大数据、机器学习等方式进行价值提炼,形成企业数据资产,提供决策支持,赋能前端业务。将企业经营管理涉及的业务场景流程标准化、数据化,为数据中台提
24、供完整的数据源,实现数据和中台建设的可复用性。技术支撑数据赋能152021.4 iResearchI数据中台的建设路径数据中台的建设不是一蹴而就的,其建设路径及难度跟企业数字化变革驱动力、行业背景直接相关,与企业原有机制的融合是一个长期的过程,其建设成本在百万元以上,建设周期更是以年为单位计算。整个数据中台的建设没有一个通用的企业级模型套用,一般需要从顶层设计出发,自上而下贯彻。根据企业自身的业务目标逐级建设,优先从小场景领域内开始试点,逐步纳入更多的业务模块,以达到企业数字能力的逐级进化和价值的持续叠加。此外,在数据中台的建设过程中,企业需要培养自身的数据管理团队,甚至重构整个IT团队,以提
25、高数据服务和企业数字化运营的能力。来源:艾瑞咨询研究院根据公开资料自主研究及绘制。需要经历长期、分阶段的逐级建设过程数据中台的建设路径营销、财务或其他核心业务,企业需找准切入点,明确该业务的目标和范围,分析需求,进行初步的业务重塑,减少交付压力。从试点中验证技术平台能力、消化中台建设方法论,以完善相关产品套件及迭代中台全局架构。纳入企业战略,达成全员共识,自上而下推动,分步实施,明确分工和责任;从数据向上,业务向下同步思考,建立全局架构数据中台的设想,初始化数据采集、数据公共层和应用层建设。能力沉淀,优化和拓展场景应用,建设范围逐渐扩大到业务全域,将业务资源和共享服务沉淀整合。持续推进数据公共
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2021 年中 数据 行业 白皮书
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【宇***】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【宇***】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。