【5A文】大数据技术及应用经典培训.ppt

《【5A文】大数据技术及应用经典培训.ppt》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、【5A文】大数据技术及应用经典培训123大数据应用目录大数据时代大数据技术大数据时代大数据时代生活、工作与思维的大变革Living,workingandthinkingbigchanges一场生活、工作与思维的大变革大数据开启了一次重大的时代转型。就想望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式，成为新发明和新服务的源泉，而更多的改变正蓄势待发……大数据，变革生活大数据，变革商业大数据，变革思维大数据，开启重大的时代转型预测是大数据的核心第一个故事，百货公司知道女孩怀孕第二个故事，搜索热词里的商机第三个

2、故事，阿里知道谁需要贷款第四个故事，中移动挽留流失客户第五个故事：每天，我们借助大数据完成微信上的互动第六个故事：大数据解救每一位“路盲”第七个故事：大数据协助大闸蟹养殖大数据时代大数据时代国家电网大数据案例，基于PMS(电力生产系统)系统数据，构建基于词云图分析的文本信息挖掘及可视化实现对电网设备的家族缺陷信息的快速分析。6设备类型设备型号断路器查询LW25-126信息查询:高压开关设备缺陷统计分析结果一次系统－其他二次系统－其他数据挖掘分析流程应用大修技改流程厂家设计改进流程物资采购流程供应商评估流程检修计划流程详细记录信息厂家西安西开高压电器股份有限公

3、司河南平顶山高压电器股份有限公司设备类型断路器断路器设备型号LW25-126lw25-126投运日期2007-12-12008-3-1额定电压252KV252KV额定电流630A630A……………...西安西电高压开关有限责任公司断路器Lw25-1262008-3-20252KV630A......……………….…….…….…………大数据时代大数据时代西安公交集团大数据案例公交司机驾驶行为直接影响到乘客的安全，如全国公交一样，西安公交集团在每辆公交车上安装了监控设备，每日审核监控视频，对开车过程中出现违章行为的司机进行罚款处理，但由于公交车多，视频数量极大，

4、这给分析处理视频的工作人员带来了很大的工作压力，因此公交集团希望能够建立一种快速视频识别分析手段，以缓解当前这种情况。如何能让20多名工作人员从每天10个小时的视频审核工作中解脱出来？？？大数据时代违章类型：吸烟违章时间：2014-01-16违章视频时间：10:57---10:58违章车辆：陕AXXXXX违章人：张XX通过数据挖掘，使工作人员从每天长达数千小时视频违章信息筛选工作中脱离出来，将原来需要数十小时的视频审核工作，缩短为几个小时完成，大大提高了工作效率。且可以有效避免人为舞弊的情况。大数据时代数据：2014年10月纳税人A申报营业额为10万。信息：

5、2014年10月纳税人A申报营业额比去年同期减少了25%。知识：原因是纳税人A在华东地区的渠道销售不利，或其产品B进入了衰退期，还是公司整体营销活动落后，竞争者强力促销导致？或是其它原因。针对这一问题公司应对的策略是什么？智慧：应对的行动方案可能有多种，但(战略)选择哪个靠智慧。行动则又会产生新的交易数据。大数据时代大数据时代的思维变革“更多”-不是随机样本，而是全体数据当数据处理技术已经发生翻天覆地的变化时，在大数据时代进行抽样分析就像在汽车时代骑马一样。一切都改变了，我们需要的是所有的数据，“样本＝总体”。让数据“发声”小数据时代的随机采样，最少的数据获

6、得最多的信息全数据模式，样本＝总体大数据时代“更杂”-满足精确性，包容混杂性执迷于精确性是信息缺乏时代和模拟时代的产物。只有5%的数据是有框架且能适用于传统数据库的。如果不能接受混乱，剩下95%的非框架数据都无法被利用，只有接受不精确性，我们才能打开一扇从未涉足的世界的窗户。允许不精确大数据的简单算法比小数据的复杂算法更有效纷繁的数据越多越好混杂性，不是竭力避免，而是标准途径新的数据库设计的诞生大数据时代的思维变革大数据时代“更好”-不是因果关系，而是相关关系知道“是什么”就够了，没必要知道“为什么”。在大数据时代，我们不必非得知道现象背后的原因，而是要让数

7、据自己“发声”。关联物，预测的关键“是什么”，而不是“为什么”改变，从操作方式开始大数据，改变人类探索世界的方法大数据时代的思维变革大数据时代大数据时代的商业变革“数据化”-一切皆可“量化”大数据发展的核心动力来源于人类测量、记录和分析世界的渴望。信息技术变革随处可见，但是如今信息技术变革的重点在“T”（技术）上，而不是在“I”(信息）上。现在，我们是时候把聚光灯打向“I”，开始关注信息本身了。数据，从最不可能的地方提取出来数据化，不是数字化量化一切，数据化的核心当文字变成数据当方位变成数据当沟通成为数据一切事物的数据化大数据时代大数据时代的商业变革“价值”

8、-“取之不尽，用之不竭”的数据创新数据就像一个神奇的