欢迎来到加倍考研网! 北京 上海 广州 深圳 天津
微信二维码
在线客服 40004-98986
推荐适合你的在职研究生专业及院校
2021年中国数据中台行业白皮书:2030年数据中台市场规模达183.2亿元补习班

2021年中国数据中台行业白皮书:2030年数据中台市场规模达183.2亿元

2020年数据中台市场规模达到68.2亿元。随着企业数字化转型驱动,市场需求将持续增加,数据中台行业增长势头明显,市场规模快速扩张,预计将在2023年达到183.2亿元。我国数字经济维持高速增长,在信息通信新技术、新业态的带动下,传统行业焕发出新的活力,质量效益显著提升,2019年数字经济对GDP增长的贡献率达到67.7%,已经成为国民经济增长强大的引擎之一。数字产业化和产业数字化是数字经济发展的核心。数据中台的核心在于共享和沉淀能力,随着数据中台在行业头部及领先企业逐渐落地,供应商经历了各类业务场景能力沉淀的过程。在深度上,数据中台厂商承载细分行业的各类定制化业务,不断沉淀业务能力。在广度上,随着不同业务场景的持续输入,数据中台厂商产品的能力越来越丰富,覆盖的领域也越来越广泛。完善数据中台的深度和广度,提炼和整合数据中台的服务,尤其是对于对数据中台能力要求相对简单的中小企业,为客户提供标准化的整体解决方案将成为数据中台服务商的产品方向。

故群于人

人人都在说的数据中台到底是什么?

文章结构1 什么是数据中台2 数据中台提供了什么价值3 什么样的企业需要构建数据中台4 怎么构建数据中台5 数据中台行业发展状况行业落地现状 数据中台9家创业公司融资盘点6 数据中台行业发展趋势01 什么是数据中台“数据中台”这个词,已经火了大半年,彷佛接过了大数据长跑赛道的下一棒。到底什么是数据中台?首先他不是大数据平台,也不是一个系统。最早在2015年,阿里巴巴提出“大中台,小前台”战略,主要为了适应阿里电商业务扩大带来的数据运营工作,通过技术、组织架构变革,提升部门协作效率实现数据共享。阿里的中台思想起因于2014年访问芬兰明星游戏企业Supercell,学习其采用二战期间美军作战系统的“中台”,即不同于业内多款游戏分别开发而是共同开发的模式,将支持类业务放在中台,缩短前台与市场距离,快速响应市场而产生的战略规划。传统企业的组织架构通常是“烟囱式”,中台战略的核心是重构企业组织架构,解决业务和数据重复问题,形成“灵活小前台+能力共享的大中台+固定的后台”模式。数据中台的定义结合国内的大数据市场,数据中台成为我国特有的产物。根据Thoughtworks,“中台”指“企业级的能力复用平台”。而数据中台指通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径,是将数据加工以后封装成一个公共的数据产品或服务。中台是相对于前台和后台的概念,前台表现为数据的应用,通常与用户产生交互,例如app、网站等;后台负责数据开发,例如ERP等支持系统。数据中台的出现是为了解决数据后台开发无法快速跟上前台业务需求变化、业务系统数据孤岛、数据繁杂、数据隔离的难题,在前台和后台之间搭建一架桥梁,提升前台效率,增加后台灵活性,提供数据分析能力,帮助企业从数据中学习改进,调整方向。数据中台的构成根据数据中台的定义,数据中台的构成可以分为数据存储、数据治理以及数据共享。从技术通用架构来讲,数据中台还可以分为数据技术支撑、数据资产管理、数据分析挖掘、数据服务四个层面。数据中台是数据库、数据仓库、数据平台吗?数据中台不是数据库、数据仓库,也不是数据平台。数据库:主要用来存储数据。数据仓库:通过对存储的数据进行分析、处理,为业务决策者提供分析报表,发挥辅助决策的作用。通常数据仓库对数据的提取是按照需求来抽取的结构化数据,不是企业的全量数据,其分析报表的呈现需要一定时间,实效性较差。数据平台:针对数据抽取无法及时满足业务需求的痛点,把所有业务数据汇聚、集合成为一个大的数据集,再根据业务需求单独提取其中的小数据集,用来满足数据应用。数据中台:是以上数据处理形式的补充和升级,旨在从企业整体业务层面出发,实现D2V(Data to Value),通过构建数据API (Application Programming Interface,应用程序接口),使得数据响应业务的速度更快,为数据产生价值提供桥梁,它可以建立在数据仓库和数据平台之上,以数据 API 服务提供给业务方。02 数据中台提供了什么价值加强内部协作:当不同项目需要开发不同应用时,由于项目维护分属不同项目组,开发人员无法将之前数据直接拿来用,所以数据还是需要再开发一次。数据中台的出现,可以解决重复开发的问题,加强内部项目及团队协作。提升业务效率:数据开发周期往往数十天甚至几个月,无法跟上业务需求的快速变化,例如增加应用报表、获得用户数据等都需要较长时间,无法真正开发数据的价值。数据中台通过对数据的归集、清洗、处理、共享,大大提高了数据应用价值,提升了业务效率。弥补数据开发人员数量的不足:很多企业注重应用开发模块,忽视了数据开发建设,数据中台的建设可以进一步加强对数据的处理和维护。数据价值变现:以用户为核心,通过持续规模化创新,盘活全量数据,提升企业的业务响应能力,激活企业数据思维。在资产价值挖掘过程中,业务经验不断丰富和沉淀数据资产体系,持续优化业务能力。03 什么样的企业需要构建数据中台不是所有的企业都需要构建数据中台,企业所处发展阶段、业务类型、对数据价值的诉求、人员和业务规模都是影响其是否需要建设数据中台的因素。如果企业没有结合自身实际,盲目投入数据中台建设,则可能造成成本的巨额提高,而业务水平没有有效提升,不利于企业长期发展。那么,什么样的企业需要构建数据中台?(如下图总结)04 怎么构建数据中台企业构建数据中台,不仅仅是产品架构的问题,更是整体组织架构、部门协调、业务整合的规划,通常来说,构建数据中台需要经历以下五个过程:05 数据中台行业发展状况行业落地现状从市场端来说,多业务生态的大型规模公司更倾向于自建数据中台。例如,除阿里以外,国家电网也提出建设总部数据中台,以支撑其“三型两网、世界一流”战略目标。国网:数据中台建设的核心是实现国网大数据在各部门各环节的共享与应用,通过数据挖掘提供跨专业服务。国网大数据中心已经制定数据中台建设的周密方案,从技术、部署、组件测试、实施等方面开展工作,从而保证该项目的成功落地。从供给端来说,不少大数据公司陆续开展了数据中台业务,准备在这个“新”市场中分一杯羹。无论是原先做营销SaaS的公司,还是做软件开发、数据开发平台的公司,都可以从自身优势出发提供数据中台服务。包括用友、华为、京东等纷纷开展了数据中台业务的摸索。用友:在2018年推出云平台业务,包含业务、技术、数据中台三部分,为企业提供数字化转型服务。饮料加工企业小洋人乳业已成为其数据中台业务的成功案例,实现了成本降低、数据安全性增强的效果。星环科技:基于Hadoop平台的大数据、基础软件研发商,在Hadoop基础上改造组件,开发数据库,提供数据接口等;数据中台业务也是业务发展方向之一,公司已获得启明创投、腾讯、中金资本等众多机构投资。TalkingData:围绕SmartDP数据智能平台(即数据中台),为企业搭建数据智能应用生态,数据驱动业务发展,帮企业实现数据商业价值,目前已在金融、智慧家居、零售等领域积累丰富经验。明略数据:2019底,明略提出“打造智能时代的企业中台”战略,以知识图谱为载体,为行业客户提供智慧数据服务,建设数据中台和业务中台,实现企业数据协作共享的目的,为企业数据应用搭建技术体系;目前已经积累了宝洁、华为等数据中台服务案例。数据中台9家创业公司融资盘点自数据中台概念出现以来,不少创业公司涌入赛道,明确提出数据中台业务。根据数据统计,对9家创业公司进行盘点。数澜科技 国内最早数据中台服务独立供应商2016年中成立,创始人风剑(甘云锋)是原先阿里数据中台部门的骨干负责人,业内经验领先,团队来自阿里、金蝶、华为等。其数据中台业务不只是为企业提供工具,还会对企业战略、组织架构进行全方位梳理,提供顶层设计服务。2016-2018年已累积中台客户数十家,包括万科地产、中信云网、兴业银行、喜茶等。以中信为例,其痛点是整合复杂的业务条线,发挥内部协同作用,不只是工具的问题,还需要组织战略的调整,数澜在这一点上做得很好,为中信提供了数据交换整合、资产化、业务化三层服务,解决了其核心痛点。滴普科技 数据中台助力医美等门店数字化转型2018年成立,深耕医美、新零售领域,以大数据、人工智能技术为企业整合供应链,“业务中台+数据中台+AI中台“赋能企业供应链、生产营销等环节。典型案例有秀域,国内大型健康减肥、医美连锁机构,助其实现数字化转型。熵简科技 全域数据中台服务商2017年成立,通过数据分析与挖掘,面向金融、咨询等企业提供智能投研服务,随着产品及业务升级,为客户打造全域数据中台,提供智能数据服务,引领企业数据中台引擎应用。奇点云 AI驱动的数据中台创导者以云端小镇和新零售为切入点,为政府治理、传统企业数字化升级提供服务。其自研的一站式大数据智能服务平台DataSimba,能够为企业提供全链路的产品+技术+方法论服务,可以帮助企业快速开发、集成、搭建数据中台。袋鼠云 一站式数据中台PaaS服务商基于阿里云IaaS基础设施,为客户进行定制化服务,构建数据中台架构,提供整体数字化解决方案,行业覆盖鞋服、地产、新零售、乳业、综合性集团等。维妥科技 直播电商数据中台服务商围绕直播电商客户,通过信息收集,自研数据中台技术,为内容电商提供营销服务。团队成员是技术、数据分析背景出身,来自百度、联想等知名企业。数列网络 基础行业数据中台研发商公司以互联网架构和技术为核心,为电商、物流等行业客户开发数据平台,数据监控与分析平台、运维平台等,提供数据中台解决方案。数猎天下 数据可视化分析服务商以探索式数据分析技术为核心,为企业提供易用、可视化数据产品,目前已经积累了人民日报、三一重工等数十家客户案例,为企业提供企业级数据中台服务。维格智数 轻量级数据中台服务商公司由前喜茶CTO陈霈霖创办,主要针对政府、新零售等行业,提供全链条数字化升级服务,以轻量级数据中台的搭建,实现企业经营、管理、营销的全方位数字化。06 数据中台行业发展趋势搭建数据中台需要与公司战略、组织架构相协调数据中台是随着企业业务态势发展多元化,原先的组织架构、发展战略已无法跟上企业需要而产生的,如果没有系统的配套变革,单靠一个数据中台很难真正发挥作用。一方面,需要对企业内部架构进行整合,形成业务中台,为数据中台发挥价值提供基础,没有业务中台的支撑,数据中台的构建就会很难、发挥作用也有限,只有建立起成熟的业务中台,数据中台才能够形成正向循环机制;另一方面,还需要从公司发展战略、部门设置、员工配套等入手,从整体上实现企业战略转型,才能真正使得数据中台在企业落地。数据中台未来可能形成寡头局面从数据中台本身来讲,其可能是一个比较小的赛道,但从其延伸出来的智能数据应用、企业组织架构、战略咨询业务来看,是一个很好的切入点。这个领域的玩家除了近几年成立的创业公司,还有老牌的软件巨头如用友、金蝶等。由于在垂直行业内,只有核心企业具有大规模业务和数据量,才有构建数据中台的动力,其数据中台的应用场景具有天然优势,所以只有抓住垂直行业内核心企业的数据整合需求,才能最大化发挥数据中台建设价值。未来,少量企业通过树立行业标杆客户,从而吸引更多客户,可能形成寡头局面,还有少部分玩家争夺定制化长尾市场。推动产业链上下游数字化转型发展企业数字化转型的路径从最初的建立数据库,到加强数据应用、数据分析,再到建设数据中台充分整合数据,数据对企业的价值和作用越来越大。数据中台不仅有利于企业与用户之间的交互,还能够更系统地完成与产业链上下游企业数据的对接,促进产业链中生产、销售各个环节的数字化转型,提高行业整体效率。AI发展带动数据中台建设智能化建设数据中台,最终是为了实现数据的智能化、简易化、可用化,除了IT技术外,人工智能的发展会将提高数据中台的便利性和高效性,与图像识别、算法、自然语言处理、专家系统等相结合,能够输出一套数据应用方案。在数据中台底层嵌入人工智能技术,将有利于对数据标准、数据关系、数据治理的分析应用;业务与人工智能技术的结合,也会推动数据中台智能化,更大程度发挥数据中台作用,推动行业创新,加快行业发展。数据中台能力与物联网智能采集终端相结合数据有内部的和外部的,历史的和新增的,沉淀的和活跃的,数据中台可以对数据进行重构,加强对数据的处理和分析。随着国内物联网智能采集终端的发展与成熟,物联网采集终端已经拥有了众多的应用场景,比如智慧城市、智能家居、智能可穿戴设备等。其可以对数据进行实时和连续采集,之后上传到数据中台,实现数据形式的转换,丰富数据总量和类型,通过数据分析、数据挖掘,为业务决策提供辅助依据。最终,将会形成一个数据来源丰富多样、AI结合底层架构、数据应用更加简单的数据中台商业闭环,推动产业数字化转型和行业智能化发展。

第四区

访173位大数据决策者,首部数据中台行业白皮书发布

数字化浪潮席卷全球,颠覆性创新正在加速,企业面临着前所未有的挑战和机遇,必须不断加速数字化转型才能生存和领先。在数字化转型过程中,企业需要更为深入地理解客户和市场,以数据洞察来驱动企业的行动,从而更好地获取、服务以及留存客户,实现业务增长。而作为洞察经济的核心引擎,数据中台显得尤为关键。2019年6月Forrester咨询公司对国内数据中台进行了研究,访问了173位大中型企业中对数据洞察实践有了解和规划、熟悉数据中台相关概念且使用数据中台相关产品的负责人。探索了数据在推动商业洞察、提升客户体验、深化数字化转型方面的重要作用以及数据中台必备的能力,并且针对如何构建数据中台,从战略、组织、技术和人才等维度提出了相应的建议。以下为Forrester首席分析师穆飞在“2019首届数栖大会”上对于研究成果的精彩演讲分享实录,由数澜科技整理,略有删减。数据中台白皮书下载,可扫描下文海报中二维码或者关注“数澜科技“公众号即可获取。客户时代:让数据民主化,驱动企业的每一个行动Forrester的研究认为每经过几十年就会进入一个全新的时代,2010年开始我们进入客户时代。客户时代,企业一定要转型成为客户痴迷型的企业,一切的行动、洞察和产品、服务都要基于客户的需求存在。为了满足这样的目标,我们的数据应用也经历了一系列的变迁:从1970年开始,最早是管理信息系统(譬如ERP系统),开始利用计算机帮助企业处理复杂的流程和业务;数据越来越多,管理层需要知道到底发生了什么,就有了决策信息系统,可把各个流程中的数据整合出来,成为一系列指导意见传递给管理层;不仅管理层,底层员工也有数据需求,这时BI系统出现了,可以有策略组织、收集数据,帮助底层员工通过拖拉拽的方式把数据用起来;BI系统只能处理到一些诊断性的信息,对于预测性的信息(譬如未来要发生什么,做一些分析的时候),Analytics系统开始出现了;随着数据越来越多,分布式的技术出现,2010年出现大数据技术,可处理PB级数据。BI+Analytics+大数据,整合起来大多面向某一个主题或者某一个单独应用,为企业某一部分人提供服务,所以数据显示大概只有20%的数据用起来了;客户时代,需要成为客户痴迷型的企业,一定要用到全量数据,让数据真正民主化,让数据真正驱动企业每一个行动,从2015年左右开始出现了“洞察系统”——以数据中台为支撑,可以让数据真正用起来。以数据中台为基础的洞察系统位于企业应用的核心传统的企业有前台系统(互动系统SoE),需要通过它来和客户产生互动,去服务、获取客户的信息。我们也有传统的后台系统(记录系统SoR),包含传统的管理信息系统,可以把企业内部的信息沉淀起来;在客户时代我们还会依持续有策略的获取数据(自动化系统SoA),因为在客户时代,在万物互联的智能时代,我们的连接人和物的数据越来越多,有自动化系统可以帮助企业持续获取数据。而位于最中间的位置就是洞察系统SoI,是以数据中台为支撑,能够真正帮助企业从数据获取洞察,能够帮助企业把洞察直接转化为行动,这是数据中台为支持的洞察系统主要发挥的作用。数据中台能为洞察系统带来巨大收益有了洞察系统,会给企业带来很大的收益,并不是泛泛而谈,而是有实际的数据来支撑。 企业拥抱了数据中台,可以催生洞察型业务,将给企业业务增长带来强大的推进能力。总结分析全球范围内比较有代表性、能够做到以洞察为驱动的企业,对于较成熟已上市大型企业,年均增长率可达到27%,对于较敏捷的初创公司更可达到40%的年均增长率,远远领先于全球平均GDP增速。统计来看,全球8%企业进入洞察驱动较高阶段,而57%的企业只是在洞察驱动初级阶段,由于没有数据中台,无法达到全面洞察驱动。从增长速度来看,较高级别企业的业务增长能力可以是较低级别企业的1.8倍左右;对于响应客户的需求、维持竞争的优势,也有2倍的差距。因此如果想在客户时代持续保持领先,就一定要拥抱数据中台,形成数据洞察系统。数据中台可以强有力地推动数字化转型Forrester展开调查研究,走访国内173位大数据决策者,他们的级别大多都是在高级经理以上,是数据中台相关产品的规划和使用负责人,接下来我将把他们对于数据中台的看法呈现给大家。数据中台可以强有力地推动数字化转型,从三个方面来看:以客户为中心,能够全面用洞察驱动企业每一个行动。通过数据中台,对客户有更为深刻的了解,可更为精准触达想要的客户,营销更为精细化;在客户时代,客户需求千变万化,企业一定要快,一定要不断推陈出新,否则就会被淘汰,数据中台可以有效支持企业开展大规模的创新,在客户时代取得持续的领先;企业通过盘活的全量数据,构建坚实的竞争壁垒。通过数据中台可以帮助企业获得持续竞争优势,比如你可以更了解客户资源,可以获得更高客户的忠诚度。通过内外部数据的打通,更有效利用数据,数据会越来越多,数据资产增值,获取竞争优势,我们走访的客户很多认为数据中台可以带来这些价值。数据中台应该具备多维核心能力数据中台既然有这么多的好处,数据中台需要具备什么样的能力,怎么样才算数据中台?第一,数据整合和管理能力。数据在不同系统,企业要整合全量数据首先要汇聚数据;第二,数据提炼和分析加工。数据就像石油,但石油很难直接应用,需要变成汽油、柴油、润滑油才能应用;第三,数据资产化服务。数据中台推动的洞察系统,需要全面推动企业的每一个动作,这时候要有全方位服务平台,把数据资产转化为丰富多样的数据服务;第四,达到业务价值的变现。数据中台的建设并不只是IT部门的事情,数据中台一定要全方位跟业务融合,才能为业务带来价值,系统的建设才能够持续往前走并取得成功。具体展开来看:在数据整合阶段,需要数据中台整合企业内部多种来源的数据,有结构化、半结构化或者完全非结构化的各类数据,实现非常简便的管理和集成运营。这一步最为关键的是要让用户能够很方便找到数据,因为目前来看稍微大型一点的企业想要快速而精准地找到一个数据还是不容易的事情; 在提纯加工阶段,一定需要非常完善的标签体系,而且该体系是面向业务的。也就是说如果纯粹从IT人员角度来看数据,是缺少业务维度的,这时需要和业务部门一起,构建一个完善的标签体系。同时需要智能的数据影射的方法,能加快原始数据资产化进程。当然这里面很重要的是数据质量保障体系,尤其是对于AI应用,数据质量差之毫厘,结果也会谬以千里。此外,在汇聚整合和提纯加工,安全保障非常重要。在资产服务化阶段,需要提供简便数据服务开发环境以及先进的数据分析等能力 。全量数据汇聚及资产化后,关键在于最大化服务企业,因此需要便捷的数据服务开发环境,不仅能让数据工程师,甚至可以让业务人员也可以开发出洞察驱动类的应用,这是最理想的状态。同时数据可视化、AI服务以及数据分析能力也是非常关键的;在服务的业务化阶段,这关系到我们强调的洞察系统,之前是前端、后端系统,中间为什么要加一个洞察系统?因为这个系统最关键的作用是要把企业洞察转化为行动。传统企业会做各种报表、汇报邮件,最后到底带来什么特别有效的结果?它是有限的。所以一定要把通过中间的洞察系统(数据中台),打通数据驱动业务的通路,实现数据的价值变现。在此基础之上,需要管理丰富的数据应用,并且针对场景做实际的应用获取价值。建设数据中台需要全面发力根据Forrester的数据调研显示,2018年有74%的企业要建数据湖,但实际上,至少有1/3的企业只建成了数据的泥沼,数据没有用起来,想从里面取出有价值的信息是非常困难的。为什么发生这样的事情?是因为数据中台是一种战略选择、组织形式,也是一套数据运营的机制,而非仅仅是工具和产品。因此推动数据中台的全面落地不仅需要技术作为强力的基础保障,还离不开战略级的通盘考量、组织架构的支持、以及优秀数据人才的供给保障。企业需要从多方面形成合力建设数据中台,依据本行业的业务特点,解决数据孤岛、数据维护、数据价值利用低等沉疴痼疾,将数据变成可持续增值的资产, 帮助企业不断深化转型,傲立潮头,基业长青。如果只是买了一个叫做“数据中台”的产品,而且只是技术部门来主导这件事情,未来得到的结果一定失败。首先从战略角度来看,企业一定要建设以数据为驱动的战略。因为企业上下从业务部门到技术部门,从数据部门到业务开发部门,各部门一定要有一致的愿景,通过战略可以实现数据驱动的愿景,这是非常重要的。而且可以看到有96%的企业也认识到,依靠自有能力不足以完成数据中台的建设过程,需要寻找合适的合作伙伴、共建和共赢。所以与数据中台相关的商业市场,是一个非常广阔的市场。从组织的角度来看,很多时候企业各部门都希望能够拿数据,不希望给数据。因此需要有一个跨部门的组织,能够确保数据能在各个组织间充分互通;技术方面,数据中台一定要打通多方数据,一定要提供丰富的数据服务,打通前台和后台企业内部各个系统之间从数据到洞察到行动的能力。最后是人才,也是非常关键的。据统计,全国大数据类人才需求量大概是180万,但是目前只有30万,还有150万的缺口。所以即便有合作伙伴,企业内部也一定要培养大数据相关人才。可以看到企业对数据治理体系、数据资产化、服务化的人才都是非常期待的。

耳之与形

BAT都在布局的“数据中台”究竟为什么这么火?

文/邓一鸣近日,由浙江省数字经济学会、浙江省工业互联网产业联盟、杭州数字经济联合会、数澜科技等联合主办的“2019首届数栖大会”在杭州双创周主场举行。 来自信通院、华为、SAP、Cloudera、德勤中国、万科地产、兴业银行等政府及产学研领域等1000余位嘉宾、技术专家以及企业优秀实践者,探讨数据中台如何驱动业务转型,激发创新活力,推动企业创新变革。锌财经、钛媒体、36氪等财经媒体均到场参与了数据中台领域的首场峰会。会上,咨询公司Forrester发布的《《数据中台解决方案思想领导力研究项目报告》(下称《报告》),引起了数据中台领域企业的关注。 Forrester走访了国内173位地产、金融、零售、制造以及安全领域的大数据决策者,从用户认知层面印证了数据中台领域在今年以来越来越火热。《报告》结果显示,“以客户为中心用洞察驱动企业稳健行动、以数据为基础支持大规模商业模式创新、盘活全量数据构筑坚实壁垒以持续领先”成为数据中台强力推进数字化转型的三个重要方向,而数据整合和管理、数据提炼和分析加工、数据资产化服务、业务价值变现则是受访者认为数据中台应该具有的四个核心能力。“数据中台”概念火了 2019年一季度就有三家企业获融资实际上,“数据中台”在2019年成为了最火的概念。 据了解,去年年中,数据中台的百度指数还在120徘徊,今年春节后翻倍涨到了300,今年6月已经达到500。今年以来,不仅有行业内对于中台定义的百家争鸣,更有华为、腾讯、万科、京东等诸多行业头部企业带动了对数据中台落地实践的探索热潮,“数据中台”在2019上半年的数字化转型舞台中稳居C位。 即使在资本寒冬背景下,细分领域中,以建设中台为发展核心的创业型服务商也频频受到资本青睐,仅2019年1季度,即有数澜科技在内的三家企业获得新一轮融资……,这些小趋势的出现,让业内更多企业看到了中台潜在的机遇。 而作为3年前成立时就定位“数据中台”业务方向的创业公司,数澜也见证了数据中台由冷到热的全过程: 2016年到2017年,数澜只有3家中台客户;2018年的新增中台客户则达到十余家;截止5月,今年的新增中台客户已有数十家。代表客户来自各行业头部,如万科地产、方太集团、雪松控股、中信云网、兴业银行、时尚集团、视源电子、喜茶等,数澜的发展也随之高速增长。完善的企业级服务 保障数据中台在中国落地实践数据中台火了,“业务中台”、“技术中台”、“管理中台”等各类中台概念也是层出不穷,但是对于众多尚处于“数据泥沼”中的企业来说,数据中台落地实操问题的解决,才是真正能解决企业燃眉之急,而数栖大会现场诸多数字化转型的先行企业则带来了很多全新的视角和感悟。 譬如,数澜媒体集团类型的客户——旗下拥有《时尚COSMO》、《时尚先生》、《时尚芭莎》等著名杂志和IP的时尚集团,当时时尚面临的问题是:很多内容做完就完了,客户关系的维护也缺乏系统性,内容资产、客户资产比较散乱。 数澜给时尚提供了三层服务。一是数据交换,集合各刊司的电子扫描件、音视频等内容,并补充部分过往缺失数据;二是资产化,在以前的扫描件里提取图片和文字要素,并打好标签,使其成为业务人员可阅读、可理解的内容;三是数据业务化,以第一期工程的数据为载体,构建内部内容搜索引擎,助力集团业务转型 时尚员工可通过这一引擎快速查阅围绕某一人物、主题或元素的时尚以往的内容积淀,这有助于提高内容策划的效率。而在去年底,在搜索引擎上线的第二天,时尚集团副总裁余辉就利用这一工具制作了一个和故宫合作的方案,用时仅30分钟。在数澜科技创始人风剑看来,数澜正是从行业经验、技术研发、组织保障及交付服务四方面入手,打造完善的“企业级”服务能力闭环,助力企业数据中台落地。目前在房地产、金融、零售等领域,数澜如今也已积累了大量客户。

金莲

如何搭建数据中台?行业AI独角兽:一手AI,一手Know-How

乾明 发自 凹非寺 量子位 报道 | 公众号 QbitAI在官宣成为“国家新一代AI开放创新平台”两个月之后,明略科技又有新动作。刚刚,这家行业AI独角兽正式发布“打造智能时代的企业中台”战略,而且一并发布了战略的“落地方案”。包括新一代的数据中台、营销智能平台,以及面向智能运维、泛在感知和智慧零售的解决方案。这些动向背后,它瞄准的是企业数字化转型带来的市场机遇。在明略科技集团创始人、董事长兼CEO吴明辉看来,企业的数字化转型始终应该从企业管理、经营目标和组织协同层面思考。他认为,任何企业的变革,都需要中高层达成共识,基层员工有机协作,才能稳健开展。发布数据中台战略以及新一代数据中台等产品以及解决方案,就是他带领明略给出的应对之道。也是他深耕数据行业十多年给出的最新思考。“新一代”数据中台在接受量子位采访时,吴明辉介绍说,新一代数据中台是整套落地方案中的核心。数据中台近年来很火,主要是指通过数据技术对海量数据进行采集、加工,并进行统一化,形成标准数据,来提供高效服务。得益于对数据的标准化的处理,数据中台能够进一步挖掘数据价值,成为了当前企业最为看重的一个能力。在吴明辉看来,这样的数据中台还有很多优化空间,他们推出的“新一代”数据中台就是证明。那新一代在何处?吴明辉说,最直接的变化是通过“图”的方式,把多源异构的数据之间的关系全部整理好,然后基于知识图谱构建起来。这样存储数据的好处在于,能用空间来换时间,从而使中台响应速度变得更快。“就像人类的思考的逻辑一样,你平时多花一些时间去思考,用的时候就会很快。在这个数据中台里面,存了更多的数据的连接,就相当于提前把连接的工作做了,调用的时候就会更快。”与此同时,这个过程并不只是带来了快速响应。在产品发布现场,他也给出了进一步的解释:在这个过程中,企业通过多种AI技术进行全链路、多维度数据打通,实际上就在打通感知、认知环节,感知和认知打通最终会形成完整的闭环智能应用。通过技术,可以对数据关系进行更好的挖掘,以及更好的存储。但从哪个角度去挖掘数据价值更中要害?挖掘的数据价值怎样进入行业场景中去?比如在营销行业,什么时候投放广告效果最好?投放什么样的广告素材最好?广告投放到哪里最好?投放多久最好?等等。只有技术并不够,还需要解决方案中具备行业“Know-How”的能力,才能够将数据价值最大化。因此,在AI落地行业的过程中,“Know-How”是核心阻碍,但掌握“Know-How”也就具备了更高的壁垒。那怎样才能获得这一能力?一方面需要行业中资深人士“带进门”,另一方面则需要对数据的进一步沉淀与多维度挖掘,在反复验证中积累。在这方面,吴明辉很有底气。他介绍称,明略科技成长至今,已经服务过上千个品牌,数据科学家跟很多很多不同行业的客户坐到一起,把行业Know-How提炼了出来,跟数据真正的融合到一起,明略的新一代数据中台,也就是从这个过程中慢慢成形的。吴明辉说,通过数据中台实现对数据资产管理,会产生大量共享和复用,这一过程不仅体现了数据和服务的价值,更重要的是能沉淀可被贡献、积累、传承的行业知识,通过知识图谱技术,这些通常被称为“行业Know-How”的知识将与数据充分融合,最终形成认知智能的行业大脑。而且,这个数据中台不仅仅是一个技术平台,还是一个持续运营的业务体系。在为客户提供高效数据服务的过程中,也可以沉淀行业业务规则与算法模型,同时提供实时反馈系统。因此,在吴明辉的理念中,数据中台的“新一代”也不仅限于技术能力上,还在其带来的影响。“在基于知识图谱能力去打造数据中台时,也是以数据为中台的人或者组织以及原有的系统的重构,所以我们觉得这样的一个理念,应该是符合未来的新一代的客户的需求的,所以我们把它称之为‘新一代’数据中台。”这就是明略的数据中台区别于其他数据中台产品的另一个地方:不只是处理、整合、挖掘数据的工具,也是驱动企业数字化转型的“引擎”与“大脑”。数据中台战略,Think Big Start Small企业想要实现数字化转型是一个复杂的过程,涉及各个层面的问题,只有“引擎”显然不够。在吴明辉看来,想要实现这个目标,“要有一个入手点,要从小做起”。他给明略选择的这个点是营销:离客户最近的部门肯定是营销和服务的团队,这个团队与客户对接的地方能够产生大量数据。这些数据就是撬动企业数字化转型非常好的入口,它不一定是唯一的入口,但是一个非常好的选择。而他们推出营销智能平台的一个目的,就是帮助客户打造一个数据中台的落地实践,也是数字化转型中的落地实践。当然,这也是明略科技的专长所在。从2006年创办秒针时算起,吴明辉团队在这一领域,已经有十多年技术积累,他们入选国家队承建的就是“营销智能”平台。同样,面向高端设备运维推出的“智能运维”解决方案,面向数据采集场景推出的“泛在感知”解决方案,以及面向零售行业推出的“明略智慧零售全渠道业务+数据中台”解决方案,也都是基于这种思路。明略科技介绍称,截至目前已为宝洁、华为等全球知名品牌、多省市公安机关、税务部门、政府管理部门、建设银行、交通银行、中国中车、上海地铁等行业标杆客户提供了数据中台建设服务。并在产品发布现场,明略科技还与罗兰贝格战略咨询、中国信通院、科特勒咨询、锐思锐拓等知名咨询机构共同举办战略布局启动仪式,共同致力于加速全球企业的数字化进程。由点(各个解决方案)及面(数据中台),从各个场景的解决方案与产品到整体中台系统,这是明略这次产品发布展现出来的最新动态。从明略整体来看,这也是其经过多年发展后定位的最新呈现。明略科技,现在是一家什么样的公司?2019年3月,在完成20亿腾讯领投的D轮融资后,明略宣布了品牌战略升级到“明略科技”。这一动向,也被行业内人士认为是明略的“去数据化”。现在,发布数据中台战略,推出新一代数据中台,明略用行动给出回应:升级到明略科技,并不是去数据化,而是将明略管理数据资产的能力带入到更多场景中。在升级前,明略聚焦的数据是一种业务,基于行业对外输出管理数据的能力。但在企业数字化转型中,需要管理的并不仅仅只是数据,还有不断数字化的人、机器和组织。基于的多年技术的积累,以及明略科学院成立,吴信东等业内顶级专家加盟,明略科技的技术实力进一步加强,也就有了明略科技的更进一步。因此,对于现在的明略科技来说,数据是一种能力,能用来连接背后人、机器、组织的智慧。明略要如何释放这种能力?在采访过程中,吴明辉反复提到的一句话可以作为答案:处理多源异构的数据,帮助客户打造一个最强的数据中台,推动它的数字化转型。

三昧

行业变革科技“数据中台”,离济南有多远

听说过前台和后台,但你听说过中台么?在今年之前中台一直是个冷词,并没有多少人知道,继5月21号全球数字生态大会,腾讯高级副总裁汤道生提出“开放中台能力,助力产业升级”后,数据中台获取了大量关注,似乎行业人人都在提数据中台,却不是所有人都清楚数据中台到底是什么样的行业技术?数据中台的出现会行业带来什么变革?字面意思,数据中台是链接前台应用和后台系统之间的一个桥梁,能支撑前台和后台进行更为流畅的工作,为用户提供最小设备整合资源内能发挥最大效能服务的平台。更深入的说,中台是一个公共服务平台,通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径,封装成一个公共的数据产品或服务,它更像是前台与后台之间添加的组“变速轮”,将封装好的数据产品和服务,整合在共享的“平台”中。前台与后台的速率进行匹配后,将后台资源顺滑流向用户,进而更好的响应服务来引领用户,使企业真正做到自身能力与用户需求的持续对接。其实,这个最早由阿里在2015年提出的“大中台,小前台”战略中延伸出来的概念,灵感来源于一家芬兰的小公司Supercell——一家仅有300名员工,却接连推出爆款游戏,是全球最会赚钱的明星游戏公司。这家看似很小的公司,设置了一个强大的技术平台,来支持众多的小团队进行游戏研发。这样一来,他们就可以专心创新,不用担心基础却又至关重要的技术支撑问题。恰恰是这家小公司,开创了中台的“玩法”,并将其运用到了极致。对于这种多项目并行,各项目相对独立,但业务需求所需要的支持类似的公司,“中台”就有存在的价值。在IT领域具备中台属性的架构早已诞生,在ESB、PaaS、SOA服务框架、微服务等,无一不具备支撑中台战略思想的潜质。2018年阿里云首次发布 " 双中台 +ET" 数字化转型方法论,借此推动诸多行业的数字化转型。作为数字化转型方法论的实践者和实操者阿里云,试图通过三大平台建设了三套 IT 系统,打通数据孤岛,实现了 " 一切业务数据化 " 的目标,让企业实现业务在线,从而在企业整体经营当中,客户能够业务实时在线、经营实现数字化、商业智能化,带来了持续的高效创新。运用这一方法论,阿里云率先在金融行业开发领域用“中台”技术进行首个试点。2019年,5月16日,恒生电子联手蚂蚁金服、阿里云共同发布了JRES3.0powered by ant技术平台。此平台可提供完整的金融企业级应用开发套件,从而降低业务开发人员技术要求,提升开发效率以及系统稳定性。值得一提的是,基于JRES3.0平台,金融机构可以进行快速创新和试错,原来以年、月为单位的业务迭代周期,可缩短至一周。质效合一的提升让其他行业对于这一新共享技术平台的开发持续看好,当下不少企业已然引进中台架构,来进行企业管理创新。以新零售为例,依托中台枢纽,快速洞察消费者并快速做出反应,重构利益分配,实现线上+线下的一体化经营,打造通过企业中台构建的消费者服务生态圈, 高效协同,快速满足消费者需求,提升消费者体验。中台的理念不仅在新零售行业实践,而且在企业业务与管理上也有建树,很多职能部门已经变成共享采购中心、共享人力资源服务中心、共享财务中心等。这么看来,中台构建在企业信息化进程中已经不可或缺,打造企业自己的中台变得越来越关键。当前国内外已经有不少公司开始投资建设数据中台,大家比较熟悉的包括阿里、华为、联想、海航、上汽、壳牌等,不仅大幅度提升大数据研发效率,实现数据资产的标准化管理,更通过数据服务体系让数据智能驱动业务。开创集团,领先的互联网技术与服务提供商,云计算与应用服务生态平台,16年来致力于互联网新兴技术的创新与变革。在数据中台开启的元年,开创集团更是站在时代的前沿,凭借强大的互联网资源、AI技术、大数据及云计算与应用优势,积极研试,投资建设数据中台,以“开创云”为技术爆破点,聚合企业发展强力引擎。开创企业云中台,为企业全生命周期赋能,从初创公司为企业提供互联网基层服务(域名、网站、邮箱)、到发展阶段营销赋能(小程序、电商、app)、再到壮大阶段的内部管理系统(oa、crm、hr、erp),最终到行业巨头为用户提供大数据等行业应用。相比较目前企业发展过程中各个应用系统互相独立、数据无法打通、无法适应企业快速发展,使用开创云企业云中台,所有业务系统都可以实现数据的互联互通,充分利用数据价值为企业发展插上数字的翅膀,快速适应市场变化,最终实现数字驱动企业发展。2019年9月25日,开创云生态大会即将启幕,届时开创企业云中台也将揭开神秘面纱,它的发布,将率先为山东的企业带来技术共享迭变行业运营的无限可能,且让我们拭目以待!

发上指冠

数据中台领域首次行业峰会杭州召开,超25万人次围观

2019年 6月22日,由浙江省数字经济学会、浙江省工业互联网产业联盟、杭州数字经济联合会、数澜科技等联合主办的“2019首届数栖大会”在杭州双创周主场——余杭梦想小镇隆重召开,秉持双创精神,围绕“让数据用起来 ”这一主题,“线上+线下”共25万人次、华为、万科、兴业银行、京东等千余企业参与了本次数据中台行业盛会,100+重磅嘉宾、技术专家以及企业优秀实践者,探讨数据中台如何驱动业务转型,激发创新活力,推动企业创新变革,而数澜发布SaaS 化一站式数据应用平台,三年内欲助力10万家企业将数据用起来,更是掀起了会议高潮,甫一推出,即有500+企业注册。首个数据中台行业分析报告出炉,2019已成数据中台元年2019年的科技圈,最火概念之一就是“数据中台”。去年年中,数据中台的百度指数还在120徘徊,今年春节后翻倍涨到了300,今年6月已经达到500。回看2019年,不仅有行业内对于中台定义的百家争鸣,更有华为、腾讯、万科、京东等诸多行业头部企业带动了对数据中台落地实践的探索热潮,“数据中台”在2019上半年的数字化转型舞台中稳居C位。即使在资本寒冬背景下,细分领域中,以建设中台为发展核心的创业型服务商也频频受到资本青睐,仅2019年1季度,即有数澜科技在内的三家企业获得新一轮融资……,这些小趋势的出现,让业内更多企业看到了中台潜在的机遇。而本次大会上,全球领先的咨询公司Forrester发布的《数据中台2019年行业分析报告发布》亦从用户认知层面充分印证了这一点。图 Forrester首席分析师穆飞现场解读数据中台白皮书Forrester走访了国内173位地产、金融、零售、制造以及安全领域的大数据决策者,结果显示,“以客户为中心用洞察驱动企业稳健行动、以数据为基础支持大规模商业模式创新、盘活全量数据构筑坚实壁垒以持续领先”成为数据中台强力推进数字化转型的三个重要方向,而数据整合和管理、数据提炼和分析加工、数据资产化服务、业务价值变现则是受访者认为数据中台应该具有的四个核心能力。而作为3年前成立时就定位“数据中台”业务方向的创业公司,数澜也见证了数据中台由冷到热的全过程:2016年到2017年,数澜只有3家中台客户;2018年的新增中台客户则达到十余家;截止5月,今年的新增中台客户已有数十家。代表客户来自各行业头部,如万科地产、方太集团、雪松控股、中信云网、兴业银行、时尚集团、视源电子、喜茶等,数澜的发展也随之高速增长。完善的企业级服务,保障数据中台在中国的落地实践数据中台火了,“业务中台”、“技术中台”、“管理中台”等各类中台概念也是层出不穷,但是对于众多尚处于“数据泥沼”中的企业来说,“数据中台到底一定要将企业原有信息化建设推倒重来吗”、“它能为一线业务提供多少火力”、“数据中台建设要避免哪些弯路、哪些坑”等这些落地实操问题的解决,才是真正能解决企业燃眉之急,而数栖大会现场诸多数字化转型的先行企业则带来了很多全新的视角和感悟。 譬如,数澜媒体集团类型的客户——旗下拥有《时尚COSMO》、《时尚先生》、《时尚芭莎》等著名杂志和IP的时尚集团,当时时尚面临的问题是:很多内容做完就完了,客户关系的维护也缺乏系统性,内容资产、客户资产比较散乱。 数澜给时尚提供了三层服务: 数据交换——集合各刊司的电子扫描件、音视频等内容,并补充部分过往缺失数据;数据资产化——在以前的扫描件里提取图片和文字要素,并打好标签,使其成为业务人员可阅读、可理解的内容;数据业务化——以第一期工程的数据为载体,构建内部内容搜索引擎,助力集团业务转型。时尚员工可通过这一引擎快速查阅围绕某一人物、主题或元素的时尚以往的内容积淀,这有助于提高内容策划的效率。而在去年底,在搜索引擎上线的第二天,时尚集团副总裁余辉就利用这一工具制作了一个和故宫合作的方案,用时仅30分钟。后续,时尚与数澜的二期合作,将从内容资产库,扩展至用户库和资源(客户资源)库,并开始探索数据业务化,可能的方向有:基于内容库做二次生产,部分的自动化策划、版权输出;基于资源库,开展明星经纪服务;拓展旅游、电商等新业务。在创始人风剑看来,数澜正是从行业经验、技术研发、组织保障及交付服务四方面入手,打造完善的“企业级”服务能力闭环,助力企业数据中台落地。目前在房地产、金融、零售等领域,数澜如今也已积累了大量客户。数澜发布数栖4.0,推出SaaS 化一站式数据应用平台在本次数栖大会,数澜对外正式发布数栖v4.0产品。据数澜CTO江敏介绍,相比数栖上一版本提供的数据交换中心、离线数据开发中心等核心能力之外,新版产品还增加了实时开发中心、数据资产中心、算法平台三大核心能力,并在应用层可无缝对接第三方合作伙伴的可视化产品。除此之外,数澜还发布了可视化大屏展现产品——澜图,帮助用户快速构建可视化大屏,通过拖拉拽便捷操作,快速体现数据之美。图 数澜科技CTO江敏发布数栖4.0产品,宣布“火种计划”值得一提的是,数栖4.0在为多云而生的这条路上,越走越坚定,目前已适配的厂商平台包括CDH、HDP、FI、开源版本等,支持的计算引擎超过15个,数据源超过20个,使数栖平台快速融入到企业系统架构中,更快速的支撑企业数字化转型。在本次发布上,江敏还重点阐释了数栖v4.0面向不同类型需求的客户提供了专有化部署模式和SaaS平台模式区别。数栖v4.0支持客户采购系统直接部署在企业专有环境下,同时支持企业在多云环境下的一站式私有化数据中台搭建,满足全方位对数据资产掌控需求。在面向快速成长型企业期望快速、低成本的搭建数据中台需求,数澜提供数栖平台SaaS模式服务,企业可以在数栖平台直接开通服务,通过数据连接代理,将自有数据存储和计算集群(如Hadoop集群或云端EMR集群)与数栖平台联通,快速用上大数据的能力,将自己的数据资产化后并服务自身业务应用。三年扶持千家IDV,创新DT生态模式目前,大数据处于时代风口,但大量大数据公司真正盈利的方式,仍是ERP时代定制化开发占比较大的项目制。而项目是用来积累经验的,未来必将走向产品化、标准化,以实现低成本的规模化。从定制化到标准化的路径是什么?本次大会,数澜提出了“Helios Project火种计划“,首次引入“IDV”(独立数据服务供应商)概念,期待通过构建数据中台生态,实现产品标准化、通用化和数据中台的普惠化 。数澜CTO江敏指出,未来将更加专注于提供包括数据标签、数据交换在内的通用底层数据能力,而将上层的多种数据应用,如数据可视化、营销、风控等交给合作伙伴或独立开发者。这些开发者类似云计算生态上的ISV(独立软件开发商);在数澜的生态里,他们被定义为IDV(独立数据开发商)。据悉,未来三年,数澜将计划与1000家IDV共同服务10万家最终客户。图 数字化中台生态联盟发起仪式现场同时,大会也发起了国内首个“数字化中台联盟”,在中国信通院云计算与大数据研究所指导下,由数澜科技、浙江省数字经济学会、杭州数字经济联合会及中国软件网联合德勤中国、Cloudera、汉得信息、帆软软件等业内知名企业,共同发起的联合体。未来,联盟将通过联合企业数字中台建设服务相关方,共同搭建企业数字化中台发展趋势研究、行业应用、技术研发、人才培养等的专业交流平台,通过推动项目对接、战略合作、产业孵化等多方面工作,助力实体经济破局数字化转型,快速实现数据驱动业务创新。中国企业已经快速发展了十多年,2000年之后的企业内部信息化,实现了底层IT架构的完善和初步的“业务数据化”;2004年到2012年,全行业萌发的“互联网思维”,让企业客户开始意识到数据的巨大价值;2013年之后,移动互联网大发展,为各行业提供了大量数据通道,使得企业更深程度的“业务数据化”,和对自有数据价值的更深认知。谈到对未来的判断,风剑认为:“今天,国内大概只有千分之一的企业认为自己需要数据能力,而到三年后,这一比例会到十分之一,且其中有四分之一的企业都需要数据中台。数据中台作为老系统和新业务之间的“连接器”已变得日益关键,如何把握数字化转型的关键枢纽,数澜愿联合广大政府组织、企业客户、生态伙伴,共同开启数据中台元年,推动企业数字化转型进程!”

比于大泽

什么是 数据中台,关于数据中台最好的解读

写在前面的话:不要被技术吓到哦 ,本文尽量写的白话,致力为从事大数据的运营、咨询规划、需求以及想学习大数据的入门者提供知识分享@……@导读:本文将阐述:为什么要建设数据中台,什么是数据中台,数据中台具备什么样的能力。采用什么技术来实现 一、为什么要建设数据中台 因为在当今互联网时代,用户才是商业战场的中心,为了快速响应用户的需求,借助平台化的力量可以事半功倍。不断快速响应、探索、挖掘、引领用户的需求,才是企业得以生存和持续发展的关键因素。 目前,数据体量、产业规模以及云计算高速发展所推动的基础设施成本都已不再是问题,大数据能否创造真实的商业价值和回报是大数据企业真正关心的核心问题。过去,所有大数据企业都在做项目,并没有更多资源把能力沉淀成产品和平台。比如很多可共用的数据服务没有服务化、产品化,很多产品总是做重复的动作。TalkingData创始人兼首席执行官崔晓波认为,互联网公司之间的战役已经结束了。所有企业主战场不在线上而在线下,不管是互联网巨头还是产业巨头都在思考如何利用互联网、数据和相关技术的能力改变线下产业。而且,选择合作伙伴应该遵循一个原则:愿意真的开放数据,愿意给实体产业赋能。二、什么是 数据中台数据中台是指通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径。今年,马老师(马云)说过,数据中台成为大数据行业的热门概念,它最先是从阿里引出的,“很多人会把数据比作“石油”,阿里巴巴要成为全球电子商务的“水电煤”。我们现在搭建的数据中台,就是希望扮演“发电厂”的角色。”数据中台把数据统一之后,会形成标准数据,再进行存储,形成大数据资产层,进而为客户提供高效服务。这些服务跟企业的业务有较强的关联性,是这个企业独有的且能复用的,它是企业业务和数据的沉淀,其不仅能降低重复建设、减少烟囱式协作的成本,也是差异化竞争优势所在。数据中台数据中台建设的基础还是数据仓库和数据中心,并且在数仓模型的设计上也是一脉传承,之所以我们现在处处推崇数据中台建设及应用,一个是因为数据中台确实有过人之处,另一个是这套模型在阿里体现了巨大的应用价值。三、数据中台能力数据资产管理盘点数据资源、规划数据资源、获取数据资源,并将所有数据资源进行完整呈现;通过元数据信息收集、数据血缘探查、数据权限申请授权等手段,解决"有哪些数据可用"、"到哪里可以找到数据"的难题,并且提升数据资源的利用率。数据质量管理数据质量就是保障数据正确性的工具,主要包括这么几部分:一是支持准确性校验规则,二是支持双表校验,三是输出校验报告。数据模型管理数据模型管理,主要是为解决架构设计和数据开发的不一致性,是为了约束平台使用者的表名、字段名的规范性,架构师从工具层合理的进行模型分层和统一开发规范,包括2部分,一个是规则配置,另一个是对表名、字段名的定期校验。构建标签体系对用户、产品、客商、营销各主题域进行标签提取,将其特征数字化,为后续进行精准 营销和用户画像提供必要条件。着重分析当前需要但是无法获取到的指标,描述使用不便的指标,分析问题原因,绘制数据供应链条;数据应用规划及实现数据中台策略的基本理念是,将所有的数据汇聚到数据中台,以后的每个数据应用(无论是指标和分析类的,还是画像类和大数据类的)统统从数据中台获取数据,如果数据中台没有,那么数据中台就负责把数据找来,如果数据中台找不来,就说明当前真没有这个数据,数据应用也就无从展开。四、数据中台构成“数据中台”一般包含以下几个部分:1、数据仓库:用来存储数据的,结构性数据、非结构性数据等,还有离线数据和实时数据等;2、大数据中间件:包含了大数据计算服务、大数据研发套件、数据分析及展现工具;3、数据资产管理:按照阿里的体系应该分为垂直数据、公共数据和萃取数据3层;五、总结数据时代带来的挑战不仅仅是数据量的爆发式增长,更重要是如何管理好、治理好、利用好这些数据,显然传统的大数据建设方法论无法满足需求。如果把大数据建设工作比如盖高楼的话,那么大数据平台开发和管理工具(数栈)就是打桩机、挖土机、推土机、塔吊...,过程中严苛、繁琐、体系的开发、治理、分析建设方法论(数据中台)就是楼层规划、户型设计、房屋建造....,数据服务就是业主个性化的装修。

翻个墙

2019年中国数字中台行业研究报告

目前,“数字中台”已经从一个技术词汇,慢慢转变成为企业界的共识——如果想要在信息商业中拥有一席之地,就必须要借助云计算和数据的力量,完成企业的数字化转型。伯俊软件联合艾瑞分析发布《2019年中国伯俊20周年庆典上,伯俊软件联合艾瑞分析发布《2019年中国数字中台行业研究报告》。本次报告从数字中台的概念和本质出发,梳理数据中台的发展逻辑,分析数字中台的发展现状和行业应用,判断行业发展的未来和机会,并针对数字中台下一阶段发展的关键问题,提出策略性建议。以下为报告节选内容中国数字中台发展现状数字中台的概念界定企业数字能力的沉淀与共享,是平台的平台数字化进程从移动互联网正逐渐向产业互联网的方向演进,主体由消费端用户向供给端企业转变。为顺应趋势和挑战,很多企业开始实施中台战略。以更加快速敏捷的响应业务的变化,给企业带来效能与价值的提升,增强企业的创新能力,进而促进人才和组织的优化,这是中台所存在的意义。本报告认为,中台由三层含义构成:一是快速响应需求变化的管理模式或理念;二是人员、组织结构、部门职能的调整适应提高效能;三是在数字化层面上技术和业务等能力进行跨业务单元的整合沉淀。本报告限定在第三层展开。数字中台是企业信息化进程的必然企业信息化建设向数据驱动演进,通过中台达成数据驱动1981年财政部推动提出“会计电算化”概念,企业信息化的序幕就此开启。20世纪90年代中后期,企业信息化进入了快速发展时期,IT建设以数据库、ERP 为主。2013年后移动互联网的发展,通过移动设备和各类传感器,更多行业积累了远超以往的数据量级。企业的业务形态、数据维度变得复杂多元,新的业务需求不断涌现。企业对数据治理、数据价值、数据驱动等概念有了认识。但传统烟囱式IT架构下数据形成孤岛,不易形成闭环,无法满足企业效率的提升,成了企业在数字化过程中最大痛点,在企业对数据驱动力日益迫切的需求下,数字中台是数字化转型过程中自然演进的结果。数字中台的应用价值增强数字运营力及业务响应力,提升企业竞争力在数据层面,数字中台首先解决的是企业内系统间数据孤岛的问题,将不同系统中的数据进行全面汇集和管理,通过数据提炼分析,形成企业数据资产和洞察,服务于业务,解决了数据“汇管用”的问题。在业务层面,通过对各业务线的模块去重和沉淀,共享通用模块,让前台业务更加敏捷地面向市场,实现企业新业务的快速上线与迭代,服务更多场景,提升业务响应力。在技术层面,避免重复开发,技术迭代升级更高效,可按需扩展服务,让整个技术架构更开放。数字中台的最终的应用价值是在充分的市场竞争下,保持并提升企业的运营效率和创新能力。典型企业案例伯俊软件专注零售赛道20年,凭借积淀占据新零售B端市场先机伯俊软件成立于1999年,总部位于上海,是专注于零售领域的ISV,在全国设立51家分支机构。经过20年的发展,伯俊软件由数人的团队成长为超过800人规模的大型IT服务商,其产品形态也已发展至围绕人、货、场三个维度,为品牌商提供ERP、全渠道、智慧门店、数字中台等定制化解决方案开发实施。2018年客户数量超过3000多家,从鞋服领域向其它领域如快消、珠宝等领域拓展。目前,伯俊软件服务的企业分布在全球12个国家,包括东南亚、澳大利亚、法国、英国、意大利等,目前已对接的全球门店数量超过30万家。未来,伯俊将通过中台解决方案打通各系统间的底层架构,运用云技术和中台进行数据储存和调取,在产品内置大数据、人工智能等技术,为企业打造一体式运营能力。伯俊软件打造一站式全渠道营销运营体系,为企业决策赋能在数字中台领域,伯俊软件致力于为企业搭建业务中台、数据中台,配合大数据、人工智能等技术赋能企业数字化转型。通过智能消费的有效互交,以品牌温度建立与消费者的信任连接,运用“新”零售场景为企业打造一站式营销运营体系。在软件层面打通零售企业线上线下业务,同时提供完整的全渠道运营服务,从现有业务诊断规划、落地指导等维度,帮助企业实现全渠道业务场景,发挥全渠道业务的最大效果。连接消费者和供应链,提升商品流通效率,从而构建品牌供应链的快反机制,实现业务增量。目前,伯俊已经向李宁、百丽、曼卡龙珠宝等数十家企业提供数字中台服务。未来,伯俊软件将在人员、资金加大在AI上的投入,推动零售行业数字化和智能化升级,提升企业管理决策能力,为用户创造更多价值。行业发展的挑战与趋势中国数字中台行业发展挑战企业信息化水平相对滞后,数字中台全面落地仍需时间与发达国家相比,中国企业信息化水平与经济总量的关系极不平衡。(1)2018年中国GDP占全球的比例达到15.8%,IT支出占比仅为3.7%。企业信息化发展整体发展水平滞后,企业自身IT团队自主开发能力相对较弱,数字化通常是外包或与外部机构共同开发。(2)虽然政策上已经指明了转型的方向和重点任务,但在实际落地的过程中,观望者的比例仍然很大。这说明依然有大量企业的信息化停留在初级阶段,继而推进数字化转型仍需时日,数字中台尚不是企业第一优先级。(3)数字中台最终目的是反哺业务,提升企业的数字竞争力,前提是必须将数字化转型视为企业战略,这无疑给企业带来了业务改造、技术能力、组织结构、人员储备上的挑战。推动数据智能进入行业应用从根本上为企业业务提供服务,将向数据智能化发展大数据的兴起,让不少企业投资建设自己的数据平台,但大数据平台有太多企业用不上的功能,缺乏应用场景,而在真正运用的时候无法即可调用,还需要再定制开发,这让企业的业务需求并不能及时得到响应,没有为企业产生帮助和价值,与企业建设大数据平台的初衷背离。数据中台的实施,让大数据进入企业的行业应用,将“数据驱动”运用于企业服务,帮助企业解决业务问题,赋能业务发展。鉴于此,不少大数据服务商也在开发数据中台的工具集。未来,数字中台厂商将更多依托AI技术,实现数据中台智能化,企业数据智能化发展。当前,已有不少厂商在进行数字中台能力的智能化。

投名状

易观的大数据中台之路

作者 | 易观CTO郭炜本文为CSDN即将推出的《新战场:决胜中台》专刊的第 2 篇文章。什么是数据中台?中台的定义来自于投资银行,简单说来,投行当中前台是赚钱的、后台是做支持赚钱的,而中台是支持更快赚钱的。而建设大数据中台的本质在于把过去在后台的工作挪到中台,进一步支持前台更高效的做数据分析。整体说来,数据中台可以分成两种建设模式:广中台和深中台。广中台:大部分大厂使用这种模式,在IaaS之上有大数据组件组成的PaaS中台,可以帮助各业务团队的研发,快速申请资源、快速研发数据相关应用,满足业务团队用户需求。广中台的用户基本上是各业务部门的技术人员。深中台:大部分小厂或者创新团队使用这种模式,在IaaS之上,根据数据的“主题域“或者业务领域,分别建立直接给业务人员使用的PaaS,让业务人员可以直接操作数据、进行实时计算、用户分群、用户营销等等。深中台的用户基本上是该业务主题域的业务运营或者产品人员。用一个不恰当的比喻,广中台有点像当年的数据仓库,以整合计算算力、共享数据资源为目标,需要技术人员再次加工来提供业务应用模型,深中台有点像当年的数据集市+ACRM,以直接驱动业务、业务用户直接使用数据为目标。为什么要建立大数据中台数据中台就是企业从传统信息化到数字化演进过程中的必然产物。大数据平台过去几年内非常火爆,几乎所有数字化企业都启动了相关的大数据项目,但是,建设大数据平台时有各种各样的痛点:大数据项目启动难:大数据平台建设周期长,成本高、人员互联网运营经验不足;大数据项目效果体现难:大数据如何解决互联网运营问题、大数据系统建设结果是更多的BI报表、大数据建设ROI无法衡量;大数据项目执行难:数据源纷繁复杂、原有系统涉及到多部门协调沟通、以及数据治理问题;往往一个大数据平台建设完成后,带来了大量的运维工作,而业务支持能力被业务部门质疑,到底如何衡量大数据的ROI是一个行业的痛点。在这个背景情况下大数据中台营运而生,数据中台的目标就是:1、把业务分析还给业务,让业务人员、数据科学家直接使用数据,而不是传统软件提需求出报表的方式;2、实时数据分析,即时满足运营人员的各种推测和分析需求。3、数据治理要在业务端进行,而不是在技术端进行梳理。从大数据平台到数据中台是一次从大数据从技术到业务的飞跃,过去我们只看技术,到中台时期,是从业务端看技术。如何建设大数据中台易观在建设大数据中台过程中,主要从这三个方面来进行:面向业务、开放连接、共享共建。面向业务易观的大数据中台是一个“深中台“模式,也就是中台的目标是定位在直接赋能业务用户使用,减轻大数据人员重复劳动上下功夫。因此,易观的数据中台产品“方舟”是以智能用户数据中台为目标,定位在于用户数据为中心的相关业务。深入业务用户的使用场景,提供留存、转化等等实际的业务场景,让业务人员使用。同时,根据业务人员反馈的需求、基于开放的用户数据PaaS快速打磨迭代上面的场景和应用。易观智能用户数据中台——方舟开放连接如果要支持上述提到的快速迭代,底层的大数据PaaS就需要非常灵活,开放接入各种组件、支持多种灵活的二次开发方式,还要支持多云,这里易观采用的是“大数据IOTA”架构的数据PaaS:大数据IOTA架构它的基本思路就是把数据计算分布在所有节点上,从数据采集开始就进行边缘计算,这样一来定义数据采集原子口径,将业务口径归还业务部门,更加快速的支持业务调整:统一格式/口径的数据接入(前后端采集、数据上传)方式抽象为“主-谓-宾”数据标准化模型数据计算秒算引擎满足实时多维度多模型数据查询支持业务系统数据接入,整合企业数据支持外部系统导出数据,满足更多应用场景得益于IOTA架构,易观的用户数据中台,支持4大类、10小类、近百个API,还支持JDBC接口,让业务人员和技术人员都可以快速根据自己的实际情况进行二次开发——授人以鱼不如授人以渔,最了解业务的还是业务用户自己,数据中台就是帮助它实现自主完成相关业务分析和数据驱动的工具。数据中台还要选择具有联通型的组件,这样可以快速和企业内部的各种组件对接,易观选取的是Presto,它具有的特性是可以快速链接多种大数据组件的能力,天然支持Mysql,HDFS和Cassandra,而易观又扩展了它的能力,开源了自主研发的Ku Connector,Hbase Connector等,让企业可以快速通过易观的数据中台联通自己的内部大数据组件。开放性还体现在多云支持上,目前,公有云、私有云多种形态并存,大数据中台组件要适配当前的多种云方式,目前易观自己的用户数据中台方舟采用了IOTA架构中“计算-存储分离”的模式已经支持了阿里、AWS、腾讯等主流云厂商,这样可以帮助企业顺利使用多云模式。共享共建大数据平台组件繁多,如何可以让数据中台与大数据平台有效配合,易观的思路是从开放API、开放组件到开源布局,下图是易观免费的用户数据中台Argo和大数据平台生态布局的关系。免费的用户数据中台Argo与大数据平台的关系作为免费用户数据中台,Argo帮助初创企业和创新团队建立自己的用户行为中台,完成业务分析部分,但是大的企业有自己的大数据平台,直接如何方便互联互通。这个情况非常复杂,很难通过一家企业来完成所有的生态,易观的思路是开源,共享共建。大数据平台中的核心ETL调度组件,易观3月份正式开源了分布式易扩展的可视化DAG工作流任务调度系统Dolphin Scheler,在众多用户期待和全球技术专家投标的肯定下,8月底正式加入Apache孵化器,成为国内唯一的一家Apache大数据调度引擎,10月底A10峰会上,易观正式开源了“可视化埋点SDK”,旨在帮助企业解决数据埋点这个痛点。数据中台作为一个可内聚的产品,周边的组件是要通过开源、共建生态来完成的,无论是甲方的企业还是乙方的专业公司,中台的建设都需要开放心态,共享使用场景、经验,共同打造开源社区,共享行业资源才可以真正做好。数据中台的未来展望每一个技术架构的升级,其实背后是管理思路的变革,数据中台将过去数据决策迭代周期从数月到数天乃至数天,是“精益”理论和敏捷开发在数据行业里的具体实现。更多的让业务用户可以直接使用数据、利用数据进行运营、测试,形成精益闭环是未来大势所驱。技术上,大数据中台的发展,也对大数据平台工程师提出了更高的业务需求,最终会形成一个新的工程师种类——大数据中台工程师,他们是了解业务、懂得数据分析,还会使用大数据技术来实现大数据中台的技术人员。大数据中台,只是数据从后台走向前台的过渡阶段,最终在IOT、5G、AI的助力下,数据技术会成为一个公司的“前台”业务,最终让数据和人工智能替代前台人员直接为业务变现。《新战场:决胜中台》专刊文章链接:平安科技智能认知的“中台战事”(*本文为AI科技大本营约稿文章,转载请微信联系 1092722531)