[计算机硬件及网络]大数据介绍

《[计算机硬件及网络]大数据介绍》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、大数据：创新、竞争和生产力的下一个前沿大数据——一股不断增长的洪流大数据——正在展现它的价值纵观全球数据形势：大幅增长和价值创造大数据技术大数据在五大领域中的变革潜力对各行业的研究结果对组织领导者的影响对决策者的影响我们所说的大数据是什么？大数据——指大小超过标准数据库软件工具能够捕获、存储、管理和分析的数据集。这是一个灵活的定义，基于不用的行业、不同数据类型等等（从几十个兆字节到几PB）1、数据已经席卷了每个行业和业务功能，如今已成为重要的生产要素2、大数据正在通过多种方式创造价值：创造透明度通过实验来发现需求、显示变化，以及提高性能细分人群来定制行为利用自动化算法取代

2、或支持人工决策开发新的商业模式、产品和服务3、大数据的应用将会成为今后私营企业竞争和发展的一个关键基础我们如何衡量大数据的价值？4、大数据的运用将加强新一波的生产力增长和消费者剩余5、当大数据正在影响各个行业，某些行业已获得更大的收益6、企业对大数据的利用的同事，会出现相关人才的短缺7、为充分发挥大数据的潜力，以下几个方面的问题必须得到解决：数据策略技术企业变革和人才数据存取产业结构纵观全球数据形势：大幅增长和价值创造数据量正在呈指数速度增长数据存储量显著增长，在2000年之后明显的从模拟数据转向数字数据计算能力也显著增强不同行业的大数据强度不同，但是在每个行业中都已经到

3、达一个临界值不同行业所产生和存储的数据类型各有不同现今各主要趋势将继续促使数据增长社交网络在网络和智能手机上的渗透不断增强，常用用户在总用户的占比不断增大。传统的IT应用已经促进生产率增长——大数据将会是下一个前沿大数据技术大数据的分析技术A/Btesting（splittesting、buckettesting）A/B测试Associationrulelearning关联式规则Classification分类法Clusteranalysis群集分析Crowdsourcing众包Datafusionanddataintegration数据融合&数据集成Datamining

4、数据挖掘Ensemblelearning集成学习Geneticalgorithm遗传算法MachinelearningNaturallanguageprocessing(NLP)自然语言处理Neuralnetworks神经网络Networkanalysis网络分析Optimization最优化Patternrecognition模式识别Predictivemodeling预测模型Regression回归分析SentimentanalysisSignalprocessing信号处理Spatialanalysis空间分析Statistics统计Supervisedlearni

5、ng监督学习Simulation仿真Timeseriesanalysis时序分析Unsupervisedlearning无监督学习Visualization可视化大数据技术用于合计、控制、管理和分析大数据的技术越来越多。以下列出一些较为更突出的技术:MapReduce.Mashup.Metadata.Non-relationaldatabaseR.RelationaldatabaseSemi-structureddata.SQL.StreamprocessingStructureddata.Unstructureddata.Visualization.BigTable.B

6、usinessintelligence(BI).商业智能Cassandra.Cloudcomputing云计算Datamart数据市场Datawarehouse.Distributedsystem分布式系统DynamoExtract,transform,andload(ETL).GoogleFileSystem.Hadoop.HBase.可视化TagcloudClustergramHistoryflowSpatialinformationflow大数据在五大领域的变革潜力医疗行业公共部门零售行业制造行业通讯行业医疗保健（美国）美国医疗保健费用超过经济增长美国及海外的医疗保

7、健体系在大数据的应用上已获得初期成功美国医疗保健的数据主要划分为四块——药物研发数据、临床数据、活动和成本数据、患者行为和情绪数据美国医疗保健可利用多种大数据手段临床操作——1、疗效比较研究2、临床决策支持系统3、医疗数据透明度4、远程医疗监护5、针对患者情况的先进分析付款/定价——1、自动化系统2、健康经济学&实效研究&基于绩效的定价计划研发——1、预测模型2、改进临床试验设计的统计工具和算法3、临床实验数据分析4、个体化医疗5、疾病模式分析新业务模型——1、患者临床记录和需求数据的聚合2、在线平台和社区公共卫生大数据在美国