大数据云图:如何在大数据时代寻找下一个大机遇
上QQ阅读APP看书,第一时间看更新

将信息变成一种竞争优势

AWS之类的服务与Hadoop之类的开源技术相结合,意味着企业终于能够尝到信息技术在多年以前向世人所描绘的果实。数十年来,人们对所谓的“信息技术”的关注一直偏重于其中的“技术”部分。首席信息官(CIO)的职责就是购买和管理服务器、存储设备和网络。而如今,信息以及对信息的分析、存储和预测的能力,正成为一种竞争优势(见图3—1)。

图3—1 大数据将“信息技术”的焦点从“技术”转变为“信息”

信息技术刚刚兴起的时候,较早应用信息技术的企业能够更快地发展,超越他人。微软在20世纪90年代就树立并巩固了它的地位,这不仅得益于它开发了世界上应用最为广泛的操作系统,还在于当时它在公司内部将电子邮件作为标准的沟通机制。事实上,在许多企业仍在犹豫是否采用电子邮件的时候,电子邮件已经成为微软讨论招聘、产品决策、市场战略之类事务的标准沟通机制。虽然群发电子邮件的交流在如今已是司空见惯,但在当时,这样的举措让微软较之其他未采用电子邮件的公司具有更多的速度和协作优势。

接受大数据并在不同的组织之间民主化地使用数据,将会给企业带来与之相似的优势。诸如谷歌和Facebook之类的企业已经从“数据民主”中获益。

通过将内部数据分析平台开放给所有跟自己公司相关的分析师、管理者和执行者,谷歌、Facebook以及其他一些公司已经让组织中的所有成员都能提出跟商业有关的数据问题、获得答案并迅速行动。正如Facebook的前任大数据领导人阿施什·图苏尔(Ashish Thusoo)所言,新技术已经将我们的话题从“储存什么数据”转化到“我们怎样处理更多的数据”这一话题上了。

以Facebook为例,它将大数据推广成为内部的服务,这意味着该服务不仅是为工程师设计的,也是为终端用户,即生产线管理人员设计的,他们需要运用“查询”来找出有效的方案。因此,管理者们不再需要花费几天或是几周的时间,来找出网站的哪些改变最有效,或者哪些广告方式的效果最好。他们可以使用内部的大数据服务,而这些服务本身就是为了满足他们的需求而设计的,这使得数据分析的结果很容易在员工之间共享。

过去的20年是信息技术的时代,接下来的20年的主题仍会是信息技术。这些企业能够更快地处理数据,而公共数据资源和内部数据资源一体化将带来独特的洞见,使他们能够远远超越竞争对手。正如“大数据创新空间曲线”(Big Data Start-up Space Curve)的创始人和首席技术官安德鲁·罗杰斯(J. Andrew Rogers)所言,“你分析数据的速度越快,它的预测价值就越大”。企业如今正在渐渐远离批量处理数据的方式(即先存储数据,之后再慢慢进行分析处理)而转向实时分析数据来获取竞争优势。

对于高管们而言,好消息是:来自于大数据的信息优势不再只属于谷歌、亚马逊之类的大企业。Hadoop之类的开源技术让其他企业可以拥有同样的优势。无论是老牌财富100强企业还是新兴初创公司,都能够以合理的价格利用大数据来获得竞争优势。

数据价格下降,数据需求上升

揭秘大数据

与以往相比,大数据带来的颠覆不仅是可以获取和分析更多数据的能力,更重要的是,获取和分析等量数据的价格也正在显著下降。但是价格“蒸蒸日下”,需求却蒸蒸日上。这种略带讽刺的关系正如所谓的“杰文斯悖论”(Jevons Paradox)经济学家杰文斯通过观察工业革命得出该悖论,并以他的名字命名。一样。科技进步使储存和分析数据的方式变得更有效率,与此同时,公司也将对此做出更多的数据分析。简而言之,这就是为什么大数据能够带来商业上的颠覆性变化。

从亚马逊到谷歌,从IBM到惠普和微软,大量的大型技术公司纷纷投身于大数据;而基于大数据解决方案,更多初创型企业如雨后春笋般涌现,提供基于云服务和开源的大数据解决方案。

大公司致力于横向的大数据解决方案,与此同时,小公司则以垂直行业的关键应用为重。有些产品可以优化销售效率,而有些产品则通过将不同渠道的营销业绩与实际的产品使用数据相联系,来为未来营销活动提供建议。这些大数据应用程序(Big Data Applications)意味着小公司不必在内部开发或配备所有大数据技术;在大多数情况下,它们可以利用基于云端的服务来解决数据分析需求。

大数据应用程序的兴起

大数据应用程序在大数据空间掀起了又一轮波浪。行业分析公司451集团在分析过大数据的投资前景后发布报道称,截至2011年11月,已对大数据相关的基础设施投资了大约3.5亿美元。截至2013年年中,最新的针对中外大数据投资最近的深度分析和比较,请参考张琳艳等人的报告——《中国大数据投资分析》,见链接http://www.36dsj.com/archives/ 3123。——译者注从那时起,投资者相继将大量资金投入到现有的基础设施中,又为Hadoop软件的商业供应商Cloudera投资了6500万美元,此外,还为其他公司提供了投资。与此同时,企业并没有停留在大数据基础设施上,而是将重点转向了大数据的应用,智能运营公司Splunk就是这样。

从历史上来说,企业必须利用自主生成的脚本文件来分析日志文件(一种由网络设备和IT系统中的服务器生成的文件),相对而言,这是一种人工处理程序。IT管理员不仅要维护服务器、网络工作设备和软件的基础设施,他们还要建立自己的脚本工具,从而确定因这些系统所引发的问题的根源。这些系统会产生海量的数据;每当用户登陆或访问一个文件时,一旦软件出现警告或显示错误,管理者就需要对这些数据进行处理,他们必须弄清楚究竟是怎么一回事。

有了大数据应用程序之后,企业不再需要自己动手创建工具。他们可以利用预先设置的应用程序从而专注于他们的业务经营。比如,利用Splunk公司的软件,就可以搜索IT日志,并直观看到有关登陆位置和频率的统计,进而轻松地找到基础设施存在的问题。当然,企业的软件主要是安装类软件,也就是说,它必须安装在客户的网站中。基于云端的大数据应用程序承诺,它们不会要求企业安装任何硬件或软件。在某些方面,它们可以被认为是软件即服务(Software as a Service, SaaS)后的下一个合乎逻辑的步骤。软件即服务是通过互联网向客户交付产品的一种新形式,现已经发展得较为完善。十几年前,客户关系管理(CRM)软件服务提供商Salesforce首先推出了“无软件”的概念,这一概念已经成为基于云计算的客户关系管理软件的事实标准,这种软件会帮助企业管理他们的客户列表和客户关系。

揭秘大数据

通过软件运营服务转化后,软件可以被随时随地地使用,企业几乎不需要对软件进行维护。大数据应用程序把着眼点放在这些软件存储的数据上,从而改变了这些软件公司的性质。换句话说,大数据应用程序具备将技术企业转化为“有价值的信息企业”的潜力。

举个例子,oPower公司可以改变能量的消耗方式。通过与75家不同的公用事业企业合作,该公司可以追踪约5000万美国家庭的能源消耗状况。该公司利用智能电表设备(一种追踪家庭能源使用的设备)中储存的数据,能为消费者提供能源消耗的具体报告。即使能源消耗数据出现一个小小的变动,也会对千家万户造成很大的影响。就像谷歌可以根据消费者在互联网上的行为追踪到海量的数据一样,oPower公司也拥有大量的能源使用数据。这种数据最终会赋予oPower公司以及像oPower公司之类的公司截然不同的洞察力。目前该公司已经开始通过提供能源报告来继续建立其信息资产,这些数据资源和分析产品向我们展示了未来大数据商业的雏形。

然而,大数据应用程序不仅仅出现在技术世界里。在技术世界之外,企业还在不断研发更多的数据应用程序,这些程序将对我们的日常生活产生重大的影响。举例来说,有些产品会追踪与健康相关的指标并为我们提出建议,从而改善人类的行为。这类产品还能减少肥胖、提高生活质量、降低医疗成本。