面向汽车的新一代信息技术
上QQ阅读APP看书,第一时间看更新

2.1.2 大数据的发展历程

1. 大数据的起源

大数据作为一种概念和思潮由计算领域发起,之后逐渐延伸到科学和商业领域。

(1)大数据概念的提出 大多数学者认为,大数据这一概念最早公开出现于1998年,美国硅图公司的首席科学家约翰·马西在一个国际会议报告中指出:随着数据量的快速增长,必将出现数据难理解、难获取、难处理和难组织等四个难题,并用“Big Data(大数据)”来描述这一挑战,在计算领域引发思考。

(2)大数据应用的起点 大数据的应用和技术是在互联网快速发展中诞生的,起点可追溯到2000年前后。当时互联网网页呈爆发式增长,每天新增约700万个网页,到2000年底全球网页数达到40亿,用户检索信息越来越不方便。谷歌等公司率先建立了覆盖数十亿网页的索引库,开始提供较为精确的搜索服务,大大提升了人们使用互联网的效率,这是大数据应用的起点。

(3)大数据技术的源头 由于搜索引擎要存储和处理的数据,不仅数量之大前所未有,而且以非结构化数据为主,传统技术无法应对。为此,谷歌提出了一套以分布式为特征的全新技术体系,即后来陆续公开的分布式文件系统、分布式并行计算和分布式数据库等技术,以较低的成本实现了之前技术无法达到的规模。这些技术奠定了当前大数据技术的基础,可以认为是大数据技术的源头。

2. 我国大数据的发展历程

我国大数据的发展历程可以总结如下。

(1)起步阶段 起步阶段为2004—2012年,数据库技术逐渐成熟,越来越多的企业开始重视信息管理,对数据挖掘有了初步的认识,基于企业对商业分析的需求,为应对激烈的市场竞争,数据资产管理成为热门领域。

(2)中国大数据元年 2013年,贵阳市人民政府与中关村科技园区管理委员会在贵阳签署战略合作框架协议,致力于打造全新的大数据科技园,大数据热潮在中国展开。2013年被称为中国大数据元年。

(3)成长阶段 成长阶段为2014—2016年,2014年,大数据首次出现在当年的《政府工作报告》中;2016年,中华人民共和国工业和信息化部(以下简称工信部)颁布《大数据产业发展规划》,明确提出大数据发展目标;Web2.0应用迅猛发展,非结构化数据大量产生,传统的处理方法难以应对,带动了大数据技术的快速发展;大数据解决方案逐渐成熟,形成了并行计算和分布式系统两大核心技术。

(4)大规模应用阶段 大规模应用阶段为2017年至今,2017年,大数据已经渗透到人们生活的方方面面,中国大数据产业的发展也进入爆发期,多个省市出台了大数据研究和发展行动计划,整合数据资源,实现区域数据中心资源汇集与集中建设;数据驱动决策,信息社会智能化程度大幅提高。

大数据的应用已经从互联网、营销、广告等领域逐渐向工业、政务、电信、交通、金融、医疗、教育等领域广泛渗透,并开始向生产、物流、供应链等核心业务延伸。