首页 > 范文大全 > 正文

大数据时代下的观察与思考

开篇:润墨网以专业的文秘视角,为您筛选了一篇大数据时代下的观察与思考范文,如需获取更多写作素材,在线客服老师一对一协助。欢迎您的阅读与分享!

摘 要:《大数据时代》是由英国作家维克托麦尔・舍恩伯格所著,作者是研究大数据方面的大师。本书前瞻性地指出,大数据带来的信息风暴正在变革我们的生活、工作和思维,大数据开启了一次重大的时代转型,并用三个部分讲述了大数据时代的思维变革、商业变革和管理变革。书中展示了谷歌、微软、亚马逊、IBM、苹果、facebook、twitter等大数据先锋们最具价值的应用案例。作为信息技术战线上的一名工作者,娓娓读来,思忖良多。

关键词:大数据;大数据时代;云计算

一、什么是大数据

1980年,著名未来学家阿尔文・托夫勒便在《第三次浪潮》一书中,将大数据热情地赞颂为“第三次浪潮的华彩乐章”。自2009年开始,“大数据”成为互联网信息技术行业的流行词汇。那么何谓“大数据”呢?“大数据”(big data),或称巨量数据、海量数据,是由数量巨大、结构复杂、类型众多数据构成的数据集合,是基于云计算的数据处理与应用模式通过数据的集成共享、交叉复用形成的智力资源和知识服务能力。还有研究机构如此定义“大数据”:“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。从某种程度上说,“大数据”是数据分析的前沿技术,是从各种各样类型的数据中,快速获得有价值信息的能力。

在我国,“大数据”作为一个较新的概念,目前尚未直接以专有名词被政府提出来给予政策支持。不过,在2011年12月8日工信部的物联网“十二五”规划上,把信息处理技术作为4项关键技术创新工程之一被提出来,其中包括了海量数据存储、数据挖掘、图像视频智能分析,这都是大数据的重要组成部分。而另外3项关键技术创新工程,包括信息感知技术、信息传输技术、信息安全技术,也都与“大数据”密切相关。2013年5月10日,阿里巴巴集团董事局主席马云在淘宝十周年晚会演讲时说,大家还没搞清PC时代的时候,移动互联网来了,还没搞清移动互联网的时候,大数据时代来了。是的,大数据时代真的来了。

二、大数据的特点

1.数据体量巨大。以互联网为例,一天之中,互联网产生的全部内容可以刻满1.68亿张DVD;发出的邮件有2940亿封之多;发出的社区帖子达200万个,相当于《时代》杂志770年的文字量。截止到2012年,全球数据量已经从TB(1024GB=1TB)级别跃升到PB(1024TB=1PB)、EB(1024PB=1EB)乃至ZB(1024EB=1ZB)级别。国际数据公司(IDC)的研究结果表明,2008年全球产生的数据量高达1.82ZB,相当于全球每人产生200GB以上的数据。而到2012年为止,人类生产的所有印刷材料的数据量是200PB,全人类历史上说过的所有话的数据量大约是5EB。IBM的研究称,整个人类文明所获得的全部数据中,有90%是过去两年内产生的。而到了2020年,全世界所产生的数据规模将达到今天的44倍。

2.数据类型繁多。大数据时代来临首先由数据丰富程度决定的,大数据来源于各种各样的渠道。互联网、社交网络的全球化普及,大量的UGC(互联网术语,全称为User Generated Content,即用户生成内容的意思)内容、音频、文本信息、视频、图片等非结构化数据出现了。云计算、移动互联网、车联网、手机、平板电脑、PC以及各种各样的传感器,无一不是数据来源或者承载的方式。

3.数据允许不精确。在越来越多的情况下,使用所有可能获取的数据变得更为可能,但为此也要付出一定的代价。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。然而,在不断涌现的新情况里,允许不精确的出现已经成为一个新的亮点,而非缺点。大数据时代要求我们重新审视精确性的优劣,不仅让我们不再期待精确性,也让我们无法实现精确性。

4.数据要求处理速度快。速度要求是大数据处理技术和传统的数据挖掘技术最大的区别。大数据是继云计算、物联网之后IT产业又一次颠覆性的技术变革。云计算主要为数据资产提供了保管、访问的场所和渠道,而数据才是真正有价值的资产。企业内部的经营交易信息、物联网世界中的商品物流信息,互联网世界中的人与人交互信息、位置信息等,其数量将远远超越现有企业IT架构和基础设施的承载能力,实时性要求也将大大超越现有的计算能力。

三、大数据时代下的变革

“这是一场革命,庞大的数据资源使得各个领域开始了量化进程,无论学术界、商界还是政府,所有领域都将开始这种进程。”――哈佛大学 社会学教授加里・金如是说。大数据时代下网民和消费者的界限正在消弭,政府、企业或社会的疆界变得模糊,数据成为核心的资产,并将深刻影响政府的管理模式、企业的业务模式。大数据对国家治理模式,对企业的决策、组织和业务流程,对个人生活方式都将产生巨大的影响。未来大数据将会如基础设施一样,有数据提供方、管理者、监管者,数据的交叉复用将大数据变成一大产业。2012年3月22日,奥巴马政府宣布投资2亿美元拉动大数据相关产业发展,将“大数据战略”上升为国家战略,甚至将大数据定义为“未来的新石油”。

随着大数据应用的爆发性增长,大数据已经衍生出了自己独特的架构,而且也直接推动了存储、网络以及计算技术的发展。更重要的是,它为我们看待世界提供了一种全新的方法,即决策行为将日益基于数据分析做出,而不是像过去更多凭借经验和直觉做出。大数据正在重构很多传统行业。通过收集、整理生活中方方面面的数据,并对其进行分析挖掘,进而从中获得有价值信息,最终衍化出新的商业模式。麦当劳、肯德基以及苹果公司等旗舰专卖店的位置都是建立在数据分析基础之上的精准选址。IBM执行总裁罗睿兰认为,“数据将成为一切行业当中决定胜负的根本因素,最终数据将成为人类至关重要的自然资源”。世界级领先的全球管理咨询公司麦肯锡则预测未来大数据产品在三大行业的应用就将产生7千亿美元的潜在市场,中国大数据产品的潜在市场规模有望达到1.57万亿美元。

大数据正在给人类社会的方方面面带来了巨大的变革,这是社会发展的潮流,不可逆转。作为信息技术管理者和实践者,我们只有学习顺应这种潮流,在思想上和技术上做好准备才能成为时代的先锋,才能无愧于这个时代,无愧于肩负的历史使命。让我们共同努力吧!