1.1 数据中台产生的大背景
1.1.1 新的时代浪潮
时光机回到公元2019年9月,中国IT界正在掀起一股新的汹涌大浪,“中台”这股技术之浪正在席卷IT界的每个角落,并经由IT工厂人员和各界媒体传导至各个行业。数据中台在DT时代的大背景下尤为引人注意,一些先知先觉的企业在讨论和探索数字化转型,谈论有关“数据中台”的概念,有人认为这是新一波的厂商向甲方企业收“智商税”的概念泡沫,有人认为这是给予CIO影响力的权柄,也有人认为这是企业应对“危”与“机”的快速创新利器。利用数据进行创新,看似机遇近在眼前,但各种问题又充斥在每个相关人士的心中。
“什么是数据中台?”
“数据中台有什么用?”
“什么样的企业适合建数据中台?”
“应该怎样保证数据中台的效果?”
“怎么才能说服我企业的董事长和CEO同意立项数据中台?”
“如何才能保证企业数据不被滥用,又能被开发出价值?”
“在我的行业里,有没有可以参考的成功的数据中台案例?”
“需要多长时间和多少钱才能建起来?建完之后,如何运营才能创造出价值呢?有没有持续优化成本的办法?”
风起于青萍之末,浪成于微澜之间。那么数据中台之浪,又成于哪一朵微澜之间呢?
本书的作者们都是在数据领域里摸爬滚打十余年的老数据人,我们将与各位读者一起穿透时光的迷雾,去追溯数据中台之源,回顾25年的IT到DT的演进史,畅谈“数据创新与数据中台”的实践心路,用不太出彩甚至有点干巴的技术文笔,梳理“让数据用起来”的数据中台机制,回答“数据中台百问”,为在数据创新之路上的读者们贡献一点力量。
1.1.2 从IT到DT,中国信息化演进之路
1996年8月,爱特信信息技术有限公司成立;1998年2月,爱特信推出搜狐;2000年7月,搜狐公司正式在美国纳斯达克挂牌上市。
1997年6月,网易公司成立;2000年6月,网易公司正式在美国纳斯达克挂牌上市。
1998年12月,新浪公司成立;2000年4月,新浪公司成功在美国纳斯达克挂牌上市。
而在1998年至2000年间陆续成立的腾讯、阿里、百度在十年之后接过中国互联网的大旗,形成了以BAT为首的新一轮互联网化浪潮。
2015年3月5日,国务院总理李克强在政府工作报告中提出:“制定‘互联网+’行动计划,推动移动互联网、云计算、大数据、物联网等与现代制造业结合,促进电子商务、工业互联网和互联网金融健康发展,引导互联网企业拓展国际市场。”
2019年3月5日,国务院总理李克强在政府工作报告中提出:“推动传统产业改造提升。围绕推动制造业高质量发展,强化工业基础和技术创新能力,促进先进制造业和现代服务业融合发展,加快建设制造强国。打造工业互联网平台,拓展‘智能+’,为制造业转型升级赋能……促进新兴产业加快发展。深化大数据、人工智能等研发应用,培育新一代信息技术、高端装备、生物医药、新能源汽车、新材料等新兴产业集群,壮大数字经济。”
从1995年到2015年的20年间,互联网科技改变了众多面向个体用户端“2C”的生产关系,通过构建线上平台,方便了人们的衣食住行,丰富了人们的生活体验。而在同样的时间里,在企业内部有一群为了企业生产力而奋战的技术人士,他们利用IT技术提升企业内部的生产力。2014年,马云先生正式提出“DT (Data Technology)”的概念,“人类正从IT时代走向DT时代”。他认为,IT时代是以自我控制、自我管理为主,而DT时代是以服务大众、激发生产力为主。这两者之间看起来似乎是技术的差异,但实际上是思想观念层面的差异。
同样也是在这一年年初,阿里内部的数据平台事业部正在大刀阔斧地建立整个集团的数据资产,笔者们也很有幸深度参与其中,构建了多笔数据资产,此为题外话。
2015年,“互联网+”行动计划的提出,让企业内部IT与企业外部互联网思维产生火花,云和Saa S形态的应用开始出现,从IT到DT正式有了广泛的落地实践。
1995年到2015年,互联网科技在中国从萌芽到提出“互联网+”行动计划,用了20年时间。从2015年“互联网+”提出到2019年“智能+”提出,用时仅4年。我们惊叹于这演进的速度之快,就像一个常常被提及的例子:“从整个地球史来看,人类科技进化速度的陡峭曲线,可以类比成一个猿人扔起一根骨头,等掉下来的时候骨头已经变成了火箭。”
1.1.3 外太空与黑土地,阿里与华为对中国数字化进程的贡献
1.外太空视角——阿里以数据为核心,推动数字产业化
回溯“数据中台”这个在中国被创新和实践落地的产物,就不得不去看它发端的企业——阿里巴巴。
笔者们认为阿里的贡献巨大,主要有两个原因。
第一,基于内部海量数据应用的数据中台实践经验,以及对以新零售、新金融等互联网技术和思维为核心的数据赋能业务的创新尝试,唤醒行业全面跟进和尝试“中台”理念。
2014年阿里从芬兰Supercell公司接触到中台概念后,在集团内部积极践行,开创了“大中台、小前台”的组织机制和业务机制,通过高效、统一的后方系统来支持前端的机动部队,提高作战效率,减少冗余投入。2018年,中台概念开始逐渐深入互联网企业。
❏2018年9月,腾讯宣布新成立云与智慧产业事业群(CSIG)和技术委员会,后者将负责打造技术中台。
❏2018年11月,阿里云事业群升级为阿里云与智能事业群,并开始对外输出中台能力。
❏2018年11月,美团被曝正在打通大众点评、摩拜等各业务间的数据,构建数据中台。
❏2018年12月,百度调整组织架构,高级副总裁王海峰同时负责基础技术体系(TG)和AI技术平台体系(AIG)。此后,王海峰曾在公开场合表示,打造技术中台是百度调整组织架构的战略方向之一。
❏2018年12月,京东进行了有史以来最大幅度的组织架构调整,增设中台部门。京东商城CEO徐雷还在企业年会上强调:要将中台提升为“永不停歇”的超级引擎。
第二,持续对政府、对社会拓宽基于数据的宏伟认知,并积极实践基于数据创新的城市大脑。
比如,持续提倡:“未来,数据将会是生产资料,计算是生产力,互联网是生产关系,智能时代是基于这些改变而随之发生的巨大的社会变革。未来30年,智能技术将深入到社会的方方面面,改变传统制造业,改变服务业,改变教育、医疗,所有的生活会因数据、计算而改变。IT让20%的人受益,而DT时代和AI时代的数据技术会让80%的人受益,这就是这个世界未来巨大的机会所在。并进一步落地为城市大脑、ET(Evolutionary Technology)系列。”
2016年10月,云栖大会上城市大脑首次亮相。
2017年3月,云栖大会深圳峰会推出ET工业大脑和ET医疗大脑。
2017年6月,云栖大会上海峰会推出ET环境大脑。
就像ET命名本身的科幻性隐喻,阿里所倡导的数据理念和实践犹如外太空的智慧传递,广泛而又深刻地影响着我们这个社会。
2.黑土地的尝试——华为扎根产业,领衔产业数字化转型
华为是推动中国信息化进程的另一个时代巨人,华为在CT (通信技术)领域成长为国际知名企业,进而转入IT(信息技术)领域和移动终端领域,都取得了举世瞩目的成绩。华为自身独特的流程信息化实践已成为传统行业高效利用信息化、加速数字化转型的问计首选。
笔者们认为,华为对于产业数字化转型的巨大贡献在于其基于一套创造性的“管理架构、流程与IT支撑”的管理体系,在研发、生产制造、供应交付、销售、财经等领域进行持续不断地数据管理和数据应用实践,沉淀了完整且成熟的数据管理相关流程、管控机制、组织建设、人才保障、平台建设、使能服务等体系和机制。在多业务、超大规模和全球化分布式管理的环境下做到了“以数据使能业务”,帮助华为公司在人员不显著增加的情况下,收入、利润、现金流持续有效增长。
2016年华为提出了数字化转型战略,当时希望通过数字化变革重塑华为的商业流程。公司由此提出“+互联网”的概念,希望利用先进的数字、数据技术,改造华为业务流程,致力于率先实现ROADS(实时、按需订阅、在线、自助、社交)体验并成为行业的标杆。
2018年华为建立了数字化转型实践中心(DTPC)并正式投入运营,与运营商一起开展数字化转型的实践探索和能力构建。提出统一的数字化平台必须具备以下特征:充分协同并融入业务流程,统一数据模型并可平滑交换数据,云原生和能力开放,以及智能化。基于该数字化平台,与内外部生态协作创新,可以快速提供最佳解决方案以满足客户需求,实现商业敏捷。
对于数据中台,虽然华为公司内部流程的IT架构中没有明确的提法,但是华为在对外提供的解决方案中已不断出现“数据中台”字眼,致力于打造信息化、自动化、智能化“黑土地”的华为势必要融入数据中台的洪流之中。通过以下几则有代表的信息,我们可以从侧面了解华为的数据中台。
华为云官网:“(华为智慧)园区中台包含数据中台和业务中台;数据中台对园区数据进行标准化建模,园区各单体子系统数据上传到云端后经过数据治理并存储在数据中台的主题库中……”
江苏移动:“江苏公司秉承集团2019年工作重点‘用户满意度领先’和‘降本增效’两大方针,在提升用户满意度工作方面,携手华为整合SEQ平台、MR地理化平台以及性能平台等多个大数据平台,初步实现江苏移动满意度提升数字化中台战略,通过大数据研究、分析及建模,江苏移动与华为联合研发,全国首次将全网用户业务感知地理化,抢占‘用户满意度领先’的网络高地。”
国网天津信通公司:“本次验证工作中,天津公司作为国网公司试点单位,负责开展对华为公司数据中台和云平台相关产品的技术验证测试,从而客观论证华为产品全面支撑天津公司泛在电力物联网建设的可行性。测试工作基于华为产品构建的数据中台和云平台,重点针对功能、性能、开放性、扩展性、兼容性,以及对业务应用的支撑能力开展验证工作。”
1.1.4 中国政府的支持与引导,为数据中台生长提供阳光雨露
1.两会政府工作报告
自2015年起,“互联网+”在政府工作报告中经常被提及。政务在国家层面指引和推动中国经济模式的升级和迭代。既扶植了数字产业化,又推动传统行业和产业数字化转型。
2015年制定“互联网+”行动计划。推动移动互联网、云计算、大数据、物联网等与现代制造业结合,促进电子商务、工业互联网和互联网金融健康发展,引导互联网企业拓展国际市场。
2016年落实“互联网+”行动计划。增强经济发展新动力,大力推行“互联网+政务服务”,实现部门间数据共享,发挥大众创业、万众创新和“互联网+”集众智、汇众力的乘数效应。
2017年扩充“互联网+”模式。深入推进“互联网+”行动计划和国家大数据战略,推动“互联网+”深入发展、促进数字经济加快成长,让企业广泛受益、群众普遍受惠。
2018年完善“互联网+”模式。“互联网+”广泛融入各行各业,加强新一代人工智能研发应用,在医疗、养老、教育、文化、体育等多领域推进“互联网+”,深入推进“互联网+农业”,多渠道增加农民收入,促进农村第一、第二、第三产业融合发展。
2019年全面推进“互联网+”。运用新技术和新模式改造传统产业,推行信用监管和“互联网+监管”改革,优化环保、消防、税务、市场监管等执法方式,加快在各行各业、各领域推进“互联网+”。
2.数博会
中国国际大数据产业博览会(简称“数博会”),2015年在贵阳创办,2017年正式升级为国家级展会活动。作为全球首个大数据主题博览会,凭借国际化、专业化、市场化的领先优势,数博会成为全球大数据发展的风向标和业界最具国际性和权威性的成果交流平台。
历届数博会均受到国家领导人的关怀和指示。中共中央总书记、国家主席、中央军委主席习近平向首届和近两届数博会连续发来贺信。国务院总理李克强、副总理马凯、全国人大常委会副委员长王晨先后出席前五届数博会开幕式并致辞。其中,2019年数博会共吸引448家国内外企业参展、举办专业论坛53场,专业赛事6场、各类活动近百场,来自50多个国家和地区的政要、知名企业家、专家学者、协会组织、科研机构及媒体相继参加各类活动,共话大数据前沿热题,共绘大数据发展蓝图,共享大数据时代发展新机遇。
3.数字中国建设峰会
“数字中国建设峰会”2018年在福州举办第一届,中共中央总书记、国家主席、中央军委主席习近平发来贺信,向峰会的召开表示衷心的祝贺,向出席会议的各界人士表示热烈的欢迎。
2019年第二届峰会在福州举行,为期3天的峰会共对接数字经济项目587项,总投资额4569亿元,其中签约项目308项,总投资额2520亿元。
本届峰会的主题是“以信息化培育新动能用新动能推动新发展以新发展创造新辉煌”。峰会定位为中国信息化发展政策发布平台、电子政务和数字经济发展成果展示平台、数字中国建设理论经验和实践交流平台、汇聚全球力量助推数字中国建设的合作平台。
4.智博会
中国国际智能产业博览会(Smart China Expo,简称“智博会”),是经党中央、国务院正式批准,由科学技术部、工业和信息化部、中国科学院、中国工程院、中国科学技术协会和重庆市人民政府共同主办的展会。
2018年5月,经党中央、国务院同意将中国重庆国际汽车工业展与中国(重庆)国际云计算博览会合并,并更为现名;决定智博会从2018年起,每年在重庆市举办一届。
2019年4月,中共中央总书记、国家主席、中央军委主席习近平视察重庆工作时作出“继续高标准办好智博会,深度参与数字经济国际合作”的重要指示,遵照这一重要指示,2019年智博会坚持“智能化:为经济赋能,为生活添彩”的主题,智汇八方、博采众长,重点围绕“会”“展”“赛”及“论”,集中展示全球智能产业的新产品、新技术、新业态和新模式等。
数字经济的发展已呈现出越来越清晰的特征:
数据信息资源逐步成为新的关键要素资源;
数字技术创新是数字经济持续发展的原动力;
平台化是数字经济的主要产业组织形态;
产业融合是数字经济的主要表现形式;
多元共治是数字经济时代必然的治理要求;
网络空间成为驱动实体世界变革的关键力量。
以构建数据资产体系、释放数据资产价值为核心的数据中台被推到了广阔的舞台中央。