欢迎来到天天文库
浏览记录
ID:8823120
大小:42.50 KB
页数:6页
时间:2018-04-08
《大数据将给我们带来怎样的变化》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库。
1、大数据带来的工作、学习和生活的变化以及给我们的启示我们都听过这个预测:到2020年,电子数据存储量将在2009年的基础上增加44倍,达到35万亿GB。根据IDC数据显示,截止到2010年,这个数字已经达到了120万PB,或1.2ZB。如果把所有这些数据都存入DVD光盘,光盘高度将等同于从地球到月球的一个来回——也就是大约480,000英里。对于那些喜欢杞人忧天的人来说,这是数据存储的末日即将到来的不祥预兆。而对于机会主义者们而言,这就好比是个信息金矿,随着技术的进步,金矿开采会变得越来越容易。走进大数据--一种新兴的数据挖掘技术,它正在让数
2、据处理和分析变得更便宜更快速。大数据技术一旦进入超级计算时代,很快便可应用于普通企业,在遍地开花的过程中,它将改变许多行业业务经营的模式。在计算机世界里,大数据被定义为一种使用非传统的数据过滤工具,对大量有序或无序数据集合进行的挖掘过程,它包括但不仅限于分布式计算(Hadoop)。大数据已经站在了数据存储宣传的风口浪尖,也存在着大量不确定因素,这点上非常像“云”。我们请教了一些分析人士和大数据爱好者,请他们解释一下大数据究竟是什么,以及它对于未来数据存储的意义。大数据走进历史舞台适用于企业的大数据已经出现,这在部分程度上要归功于计算能耗的降
3、低以及系统已具备执行多重处理的能力这样一个事实。而且随着主存储器成本的不断下降,和过去相比,公司可以将更多的数据存到存储器中。并且,将多台计算机连到服务器集群也变得更容易了。这三个变化加在一起成就了大数据,IDC数据库管理分析师CarlOlofson如是说。“我们不仅要把这些事情做好,还要能承受得起相应的开支”,他说。“过去的某些超级计算机也具有执行系统多重处理的能力,(这些系统紧密相连,形成了一个集群)但因为要使用专门的硬件,它的成本高达几十万美元甚至更多。”现在我们可以使用普通硬件完成相同的配置。正因为这样,我们能更快更省得处理更多数据
4、。"大数据技术还没有在有大型数据仓库的公司中得到广泛普及。IDC认为,想让大数据技术得到认可,首先技术本身一定要足够便宜,然后,必须满足IBM称之为3V标准中的2V,即:类型(variety),量(volume)和速度(velocity)。种类要求指的是待存储数据的类型分为结构化数据和非结构化数据。量是指存储和分析的数据量可以很庞大。“数据量不只是几百TB,”Olofson说:“要视具体情况而定,因为速度和时间的关系,有时几百GB可能就算很多了。如果我现在一秒能完成过去要花一小时才能完成的300GB的数据分析,那结果将大为不同。大数据就是这
5、样一种技术,它可以满足这三个要求中的至少两个,并且普通企业也能够部署。”关于大数据的三大误解对于大数据是什么以及大数据能干什么存在很多误会。下面就是有关大数据的三个误解:1、关系数据库无法大幅增容,因此不能被认为是大数据技术(不对)2、无需考虑工作负载或具体使用情况,Hadoop或以此类推的任何MapReduce都是大数据的最佳选择。(也不对)3、图解式管理系统时代已经结束。图解的发展只会成为大数据应用的拦路虎。(可笑的错误)大数据带来的工作变化‘大数据时代’的来临,对我们统计数据的生产方式带来了很大的挑战。统计部门要充分利用‘海量数据’并
6、对其进行标准化处理,发掘这一数据‘宝库’,认真把握好这一促进政府统计改革发展的难得机遇。”在2012年12月27日开幕的全国统计工作会议上,国家统计局局长马建堂首次对“大数据时代”进行解读,并对政府统计部门如何应对“大数据时代”的机遇和挑战提出要求。传统数据采集方式不仅需要科学地确定调查对象,还需要通过标准化的报表进行数据采集、汇总和分析。然而随着信息化、网络化时代的到来,行政管理、生产经营、商务活动等众多领域正在源源不断地产生海量的、即时的电子化数据,国内许多企业和民间调查机构已经在开发、挖掘和利用这些数据资源,为用户提供咨询服务。随着“
7、大数据”资源的急剧增加和数据挖掘技术的日益成熟,为用户提供的服务正在从商务领域向公共领域渗透,官方统计作为公共统计数据信息主渠道的地位面临一定的挑战。谈及一些发达国家政府统计工作的经验,马建堂指出,近年来,国外许多政府统计机构已经开始积极应用现代化信息技术,广泛利用行政记录、企业财务会计资料来采集数据,积极研究使用“大数据”生产统计信息,努力减轻调查对象的负担。统计工作必须适应“大数据时代”的变化和要求,马建堂强调,通过有效利用客观存在的海量数据,能够有效降低统计调查成本,有效减轻被调查者的负担,缓解被调查者配合程度降低的矛盾,能够提高统计
8、数据的即时性,缩短统计数据生产周期,改善统计数据的质量。统计部门要勇敢面对挑战,顺应历史发展潮流,积极使用科学方法发掘这一巨大的“数据宝库”。大数据对生活的改变“(大数据)在人的
此文档下载收益归作者所有