什么是数据中台?全面解读数据中台

须知

公众号推文规则变了,读者会错过文章更新,点击上方 '企业数字化咨询'关注, 设为星

后台回复【技术】,申请加入资料分享&技术交流群

伴随着云计算、大数据、人工智能等IT技术迅速发展及与传统行业实现快速融合,一场由数字化和智能化转型带来的产业变革正在孕育。

随着企业规模不断扩大、业务多元化——中台服务架构的应运而生。“中台”早期是由美军的作战体系演化而来的,技术上说的“中台”主要是指学习这种高效、灵活和强大的指挥作战体系。阿里在今年发布“双中台+ET”数字化转型方法论,“双中台”指的是数字中台和业务中台。

数据中台是什么

数据中台是指通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径。数据中台把数据统一之后,会形成标准数据,再进行存储,形成大数据资产层,进而为客户提供高效服务。这些服务跟企业的业务有较强的关联性,是这个企业独有的且能复用的,它是企业业务和数据的沉淀,其不仅能降低重复建设、减少烟囱式协作的成本,也是差异化竞争优势所在。

广义的数据中台包括了数据技术,比如对海量数据进行采集、计算、存储、加工的一系列技术集合,今天谈到的数据中台包括数据模型,算法服务,数据产品,数据管理等等,和企业的业务有较强的关联性,是企业独有的且能复用的,比如企业自建的2000个基础模型,300个融合模型,5万个标签。它是企业业务和数据的沉淀,其不仅能降低重复建设,减少烟囱式协作的成本,也是差异化竞争优势所在。

建立数据中台的原因

数据中台和业务中台相比,面临的情况可能会更加复杂一点。建立数据中台的原因:

  • 大数据可以告诉决策者一些潜在的规律,以数据来证明或判断决策。以往我们会用数据来证明我们的决策对错,现在我们用数据来引导我们做出对的决策。在大数据时代,样本就是全体,大数据可以防止伪造和偏差。

  • 数据催生人工智能。数据是人工智能的根基,并且可以进行融合形成新的数据。数据给我们无限的创新,让我们不停去尝试。

  • 数据是机器人的指令,我们形成数据服务思维。数据是不断变化的,让机器智能成为决策环节,运营就可以智能化。

中台的目标是提升效能、数据化运营、更好支持业务发展和创新,是多领域、多BU、多系统的负责协同。中台是平台化的自然演进,这种演进带来“去中心化“的组织模式,突出对能力复用、协调控制的能力,以及业务创新的差异化构建能力。为什么数据中台如此重要呢,大致有以下四个原因:

1、回归服务的本质-数据重用

浙江移动已经将2000个基础模型作为所有数据服务开发的基础,这些基础模型做到了“书同文,车同轨”,无论应用的 数据模型有多复杂,总是能溯源到2000张基础表,这奠定了数据核对和认知的基础,最大程度的避免了“重复数据抽取和维护带来的成本浪费。”

曾经企业的数据抽取就有多份,报表一份,数据仓库一份,地市集市一份,无论是抽取压力、维护难度及数据一致性要求都很高。同时,统一的基础模型将相关业务领域的数据做了很好的汇聚,解决了数据互通的诉求,这点的意义巨大,谁都知道数据1+1>2的意思。

2、数据中台需要不断的业务滋养

在企业内,无论是专题、报表或取数,当前基本是烟囱式数据生产模式或者是项目制建设方式,必然导致数据知识得不到沉淀和持续发展,从而造成模型不能真正成为可重用的组件,无法支撑数据分析的快速响应和创新。其实,业务最不需要的就是模型的稳定,一个数据模型如果一味追求稳定不变,一定程度就是故步自封,这样的做法必然导致其他的新的类似的数据模型产生。

数据模型不需要“稳定”,而需要不断的滋养,只有在滋养中才能从最初的字段单一到逐渐成长为企业最为宝贵的模型资产。

以报表为例,企业报表成千上万的原因往往也是没有沉淀造成的,针对一个业务报表,由于不同的业务人员提出的角度不同,会幻化出成百上千的报表,如果有报表中台的概念,就可以提出一些基准报表的原则,比如一个业务一张报表,已经有的业务报表只允许修改而不允许新增,自然老报表就会由于新的需求而不断完善,从而能演化成企业的基础报表目录,否则就是一堆报表的堆砌,后续的数据一致性问题层出不穷,管理成本急剧增加,人力投入越来越多,这样的事情在每个企业都在发生。

3、数据中台是培育业务创新的土壤

企业的数据创新一定要站在巨人的肩膀上,即从数据中台开始,不能总是从基础做起,数据中台是数据创新效率的保障。研究过机器学习的都知道,没有好的规整数据,数据准备的过程极其冗长,这也是数据仓库模型的一个核心价值所在,比如运营商中要获取3个月的ARPU数据,如果没有融合模型的支撑,得自己从账单一层层汇总及关联,速度可想而知。

在如今的互联网时代,企业都在全力谋求转型,转型的关键是要具备跟互联网公司一样的快速创新能力,大数据是其中一个核心驱动力,但拥有大数据还是不够的,数据中台的能力往往最终决定速度,拥有速度意味着试错成本很低,意味着可以再来一次。

4、数据中台是人才成长的摇篮

原来新员工入职要获得成长,一是靠人带,二是找人问,三是自己登陆各种系统去看源代码,这样的学习比较支离破碎,其实很难了解全貌,无法知道什么东西对于企业是最重要的,获得的文档资料也往往也是过了时的。

现在有了数据中台,很多成长问题就能解决,有了基础模型,新人可以系统的学习企业有哪些基本数据能力,O域数据的增加更是让其有更广阔的视野,有了融合模型,新人可以知道有哪些主题域,从主题域切入去全局的理解公司的业务概念,有了标签库,新人可以获得前人的所有智慧结晶,有了数据管理平台,新人能清晰的追溯数据、标签和应用的来龙去脉,所有的知识都是在线的,最新的,意味着新人的高起点。

更为关键的是,数据中台让新人摆脱了在起步阶段对于导师的过渡依赖,能快速的融入团队,在前人的基础上进行创新。数据中台天然的统一,集成的特性,有可能让新人打破点线的束缚,快速构筑起自己的知识体系,成为企业数据领域的专家。

当然,数据中台的建立不是一蹴而就的,每个企业都应该基于实际打造独有的中台能力,在这个过程中,需要遵循一些原则:

首先,企业的组织架构及机制需要顺势而变。比如以前负责数据的部门或团队往往缺乏话语权,面对业务需求往往是被动的接受的角色,这让一切数据中台的想法化为泡影,需要为数据中台团队授权。

其次,要改变工作方式。现在很多企业的数据团队的主要工作内容就是项目管理、需求管理等等,当一个项目完成后又投入到下一个项目,做好一个需求后又开始负责下一个需求,这样的工作确实非常锻炼人的组织、协调能力,但这样能力的提升与工作时间的长短并不是呈线性增长的,虽然增加了项目和需求管理经验,但并不能在某一个专业领域得到知识和经验的沉淀,随着时间的流逝,越来越多的人会失去最初的工作积极性和创造性,事实上,数据人员只有深入的研究业务、数据和模型,端到端的去实践,打造出数据中台,才是最大的价值创造,才能使得持续创新成为可能。

第三,数据中台的团队要从传统的支撑角色逐步向运营角色转变。不仅在数据上,在业务上也要努力赶超业务人员,中台人员要逐步建立起对于业务的话语权,不仅仅是接受需求的角色,更要能提出合理的建议,能为业务带来新的增长点,比如精确营销。

最后,中台是适合公司特点的。最合适的中台是当你深入了解业务、产品、系统、组织,而且不仅了解今天在哪里,还要了解过去是怎么演变而来,未来又会怎么演化。只有当了解所有的东西之后,才能做出较好的中台架构设计。

(0)

相关推荐

  • 当企业中台遇见RPA:机器人中台的诞生

    UB Store 中台是近几年非常流行的一个概念,围绕中台的争议也较多. 当中台遇见另一个爆火的概念--RPA,会产生怎样的火花? 中台 (Middle Platform) 眼下,业界还没有统一的关于 ...

  • 从数据中台到AI中台,企业到底要建什么中台?

    在经历过"神话"和"梦碎"等种种风波中,中台已经走到了要验证其价值的关键路口了. 中台的"神话",来自于2015年阿里那本<企业IT架 ...

  • 中台圣经作者钟华:中台服务该如何设计

    本章将在中台架构建设思路的基础上更进一步,介绍中台如何落地,将详细说明中台架构中最为核心的部分:服务中心的设计方法,即如何从业务的需求转变为中台的数字能力?一家企业到底应该有哪些服务中心?每个服务中心 ...

  • 数据中台建设

    编辑导语:数据中台承担着一定的实现企业战略目标的使命,数据中台是处于业务前台和技术后台的中间层.这篇文章从数据中台的定义出发,详细地问我们介绍了数据中台的建设规划,推荐对数据中台感兴趣的盆友来看看. ...

  • (4条消息) 关于数据仓库、数据湖、数据平台和数据中台的概念和区别

    我们谈论数据中台之前,我们也听到过数据平台.数据仓库.数据湖的相关概念,它们都与数据有关系,但他们和数据中台有什么样的区别,下面我们将分别介绍数据平台数据仓库数据湖和数据中台. 相关概念 数据仓库 数 ...

  • 数据中台不是“银弹”:云原生数据中台:架构、方法论与实践

    彭锋等 技术琐话 要不要建设数据中台,这是每个需要做数字化运营的公司必须回答的问题.第1章介绍了数据中台的定义及其与大数据平台的关系,可以看到,数据中台所提供的功能肯定是企业需要的.那么何时开始建设数 ...

  • (4条消息) 全面解读数据中台、数据仓库和数据湖

    浪尖聊大数据-浪尖 2021-07-24 12:39:00 122 收藏 文章标签: 数据仓库 lamp scipy zk makefile 一站式学习AI基础知识+核心技术+实操教程+免费工具集9大 ...

  • 一文尽览:数据趋势、数据治理、数据架构、数据中台、数据安全数据运维

    作者丨韩锋频道 作为数据库领域重量级的大会,DTCC每年都会引发人们的关注.通过大会,可以了解行业动态,洞悉趋势发展,学习最新技术.今年因个人原因,没有现场参会.所幸近期大会PPT材料已放出,抽空学习 ...

  • 数据中台即服务——数据中台的四大支柱

    作者丨石秀峰 全文共4416个字,建议阅读10分钟 中台概念,2015年诞生,2019年爆火,在最火的时候被很多人当成了"无所不能"的"万能药",只要是IT的问 ...

  • 数据湖,比“数据中台”更需要重视的概念|腾研识者

    一件事物若能经得起时间的推敲,经得起历史的选择,回过头去看仍能矗立在长河之中,那我们通常会称它为"经典". 10年前,Pentaho公司(一家开源BI公司)的CTO詹姆斯·迪克森在 ...

  • 数据治理已成为数据中台的必争之地

    须知 公众号推文规则变了,读者会错过文章更新,点击上方 '企业数字化咨询'关注, 设为星标 后台回复[技术],申请加入资料分享&技术交流群 尽管数据还没有被列入企业的资产负债表,但这只是一个时 ...

  • 智慧中台与大数据系列(更新中...)

    大数据项目,如何保障成功交付? //v.youku.com/v_show/id_XMzk3MDEzOTE2NA==.html 大数据的数据服务开发技术与数据中台录屏视频地址: //v.youku.co ...

  • 快手数据中台建设 - 大数据服务化之路

    前言 背景 快手是一家数据驱动的公司,数据扮演了非常重要的角色,而数据的生产加工主要依靠数据开发工程师,其工作内容会涉及多个方面:数据开发工程师则首先根据业务需求开发好高质量的数据,通常是结构化数据( ...

  • 数据中台:让数据用起来 (3)

    8.7 数据资产管理职能   <数据资产管理实践白皮书4.0>中规定,数据资产管理的管理职能包括数据标准管理.数据模型管理.元数据管理.主数据管理.数据质量管理.数据安全管理.数据价值管理 ...

  • 数据中台:让数据用起来 (2)

    第6章 数据开发:数据价值提炼工厂   汇聚联通到中台的数据,基本是按照数据的原始状态堆砌在一起的,是企业对过往所有IT信息化建设积累的成果的融合.数据开发是数据资产内容建设的主战场,是数据价值生产过 ...