浅谈大数据技术及应用

《浅谈大数据技术及应用》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、浅谈大数据技术及应用（黑体小二）哈尔滨商业大学管理学院物流工程2015王兴哲摘要：大数据的概念由来已久，但在多数人眼中大数据就是数据大，甚至有时和云计算混为一谈。本文主耍对大数据的定义进行重新的认识，并将其与云计算加以区别。而在大数据流行的今天，大数据究竟带来了什么有利的影响，或者说它将有什么样的前景。这些问题都将在文中一一列举关键词：大数据云计算应用浅谈大数据技术及应用1引言大数据这一术语止是产生在全球数据爆炸增长的背景下，用来形容庞大的数据集合。与传统的数据集合相比，大数据通常包含大量的非结构化数据,且大数据需要更多的实时分析。此外，大数据述为挖掘隐藏的价值带来了新的机遇，同时给我们带来

2、了新的挑战，政府机构最近也宣布了一项加快大数据进程的重大计划,各行各业也都在积极讨论大数据的吸引力。大数据时代的到来，是全球知名咨询公司麦肯锡最早提出的，麦肯锡称：“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。”近几年大数据一词的持续升温也带来了大数据泡沫的疑虑，大数据代表了互联网的信息层（数据海洋），是互联网智慧和意识产生的基础。包括物联网，传统互联网，移动互联网在源源不断的向互联网大数据层汇聚数据和接受数据。2大数据的定义一般意义上，大数据是指无法在有限时间内用传统1T技术和软硕件工具对其进

3、行•感知、获取、管理、处理和服务的数据集合。大数据技术描述了新一代的技术和架构体系,通过高速采集、发现或分析，提取各种各样的大量数据的经济价值。大数据的特点可以总结为4个V,即volume（体量浩大）.variety（模态繁多）.velocity（生成快速）和value（价值巨大但密度很低）。大数据价值链可分为4个阶段:数据生成、数据采集、数据储存以及数据分析。数据分析是大数据价值链的最后也是最重要的阶段，是大数据价值的实现,是大数据应用的基础，其目的在于提取有用的值，提供论断建议或支持决策，通过对不同领域数据集的分析可能会产生不同级别的潜在价值。3大数据的价值大数据在投资者眼里是金光闪闪的

4、两个字：资产。[3]比如，Facebook上市时，评估机构评定的有效资产中大部分都是其社交网站上的数据。如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。Target超市以20多种怀孕期间孕妇可能会购买的商品为基础，将所有用户的购买记录作为数据来源，通过构建模型分析购买者的行为相关性，能准确的推断出孕妇的具体临盆时间，这样Target的销售部门就可以有针对的在每个怀孕顾客的不同阶段寄送相应的产品优惠卷。Target的例子印证了维克托•迈尔-舍恩伯格提过的一个很有指导意义的观点：通过找岀一个关联物并监控它，就可以预测未来。Tar

5、get通过监测购买者购买商品的时间和品种来准确预测顾客的孕期，这就是对数据的二次利用的典型案例。如果，我们通过采集驾驶员手机的GPS数据，就可以分析出当前哪些道路止在堵车，并可以及时发布道路交通提醒；通过采集汽车的GPS位置数据，就可以分析城市的哪些区域停车较多，这也代表该区域有着较为活跃的人群，这些分析数据适合卖给广告投放商。不管大数据的核心价值是不是预测，但是基于大数据形成决策的模式已经为不少的企业带来了盈利和声誉。从大数据的价值链条来分析，存在三种模式：1手握大数据,但是没有利用好；比较典型的是金融机构，电信行业，政府机构等。2没有数据，但是知道如何帮助有数据的人利用它；比较典型的是1

6、T咨询和服务企业。3既有数据，又有大数据思维；比较典型的是Google,Amazon等。未来在大数据领域最具有价值的是两种事物：1拥有大数据思维的人，这种人可以将大数据的潜在价值转化为实际利益；2述未有被大数据触及过的业务领域。这些是还未被挖掘的油井，金矿，是所谓的蓝海。下面是大数据在当下的杰出表现：大数据帮助政府实现市场经济调控、公共卫生安全防范、灾难预警、社会舆论监督；大数据帮助城市预防犯罪，实现智慧交通，提升紧急应急能力；大数据帮助医疗机构建立患者的疾病风险跟踪机制，帮助医药企业提升药品的临床使用效果，帮助艾滋病研究机构为患者提供定制的药物；大数据帮助电商公司向用户推荐商品和服务，帮助

7、旅游网站为旅游者提供心仪的旅游路线，帮助二手市场的买卖双方找到最合适的交易目标，帮助用户找到最合适的商品购买时期、商家和最优惠价格；大数据帮助企业提升营销的针对性，降低物流和库存的成本，减少投资的风险，以及帮助企业提升广告投放精准度，而当物联网发展到达一定规模时，借助条形码、二维码、RF1D等能够唯一标识产品，传感器、可穿戴设备、智能感知、视频采集、增强现实等技术可实现实时的信息采集和分析，这些数据能够支撑智