b.面向工业物联网的海量数据实时处理平台-乔颖

《b.面向工业物联网的海量数据实时处理平台-乔颖》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、面向工业物联网的海量数据实时处理平台中国科学院软件研究所2011年12月目录工业物联网建设背景和挑战物联网概述工业物联网环境下,海量数据处理面临的挑战应用案例—面向复杂生产过程的工艺技术管理结束语面向工业物联网的海量数据实时处理平台设计与实现物联网的介绍物联网（IOT，The Internet  ofThings），利用条码、射频识别（RFID）、传感器、全球定位系统、激光扫描器等信息传感设备，按约定的协议，实现人与人、人与物、物与物的在任何时间、任何地点的连接（anything、anytime、anywhere）

2、，从而进行信息交换和通讯，以实现智能化识别、定位、跟踪、监控和管理的庞大网络系统。泛在的感知：利用RFID、传感器、二维码，及其它各种的感知设备随时随地的采集各种动态对象，泛在的感知世界。泛在的连接：利用以太网、无线网、移动网将感知的信息进行实时的连接与传送。泛在的智能：对物体实现智能化的控制和管理，真正达到了人与物的沟通。广义的物联网涵义物联网的特点麦肯锡对海量数据的解读《海量数据：创新、竞争和提高生产率的下一个新领域》By麦肯锡全球研究院收集、存储和发掘利用海量数据，以获取洞见，可以为世界经济创造巨大的价值提高

3、企业和公共部门的生产率和竞争力，并为消费者创造巨大的经济利益。2000年后，数据存储显著增长物联网产生的数据随着链接点数量的增多呈现指数级的增加运算能力也相应快速提高海量信息涉及的技术事件管理技术海量数据分析技术A/B测试、关联规则学习、聚类分析、归类、数据融合和数据集成、数据挖掘、集成学习、遗传算法、机器学习、自然语言处理、神经网络、网络分析、优化、模式识别、预测模型、回归分析、情感分析、信号处理、空间分析、统计、仿真……及数据存储、商业智能、云计算、数据集市、数据仓库、分布式系统、ETL、google档案系统、

4、分布式计算、Hbase、映射和化简、聚合、非关系型数据库、关系型数据库、开放式数据库、SQL、流处理、结构数据、非结构化数据、可视化技术……标签云、clustergram函数、空间信息流……可视化技术海量数据在五个领域的改革潜力临床决策支持系统增强信息透明度（过程视图、仪表板）病人远程监控改善公共卫生监测和反应交叉销售基于位置的营销品种优化劳动投入优化基于Web的市场对比引擎预填信息自动化算法人群细分和定制创建新的业务模型、产品和服务医疗保健制造业公共部门零售个人定位数据建立协作的、跨功能的研发和产品设计聚合客户数

5、据并广泛应用虚拟合作（创意市场）精益制造……智能路由汽车远程信息处理手机定位服务广告的地理定位电子收费保险订价……工业环境下物联网海量信息处理面临的挑战分布式数据采集工业物联网：面向整个供应链的传感器设备和业务的集成；移动计算：移动通讯的发展，智能终端的普及；多工厂集成：集团化战略的发展要求多工厂间协同更敏捷。信息处理特征：海量、多变量、高噪音、强耦合；数据源和数据质量的不确定性；多时标与不完整性，许多变量的变化快慢各异，采集信号的频率不同，导致时间上的不同步和不完整。知识挖掘智能报警：事件驱动、报警抑制、报警规则

6、；数据驱动VS模型驱动：结合机理模型和统计分析模型，适应复杂工况信息推理过程缺失：以人为中心，面向多人协同交互分析。据统计在一些现代化工厂，因为缺乏有效的数据处理和分析技术，已有的数据库中90%以上的数据多年无人问津。目录工业物联网建设背景和挑战总体架构核心技术面向工业物联网的海量数据实时处理平台设计与实现结束语应用案例—面向复杂生产过程的工艺技术管理面向工业物联网的海量数据实时处理平台建设目标Knowledge数据是未经组织的外部环境和客观事物的事实信息是具有时效性、有时序关系的、经过加工处理的、对决策有价值的数

7、据流。知识是让从定量到定性的过程得以实现的、抽象的、逻辑的东西。InformationData“如何实时改善生产过程创造价值”从过程控制现场海量数据中实时识别有价值的事件，并将获得的事件通过以人为中心的协同决策来挖掘潜在知识，指导生产过程优化与生产决策。面向工业物联网的海量数据实时处理平台运行架构面向工业物联网的海量数据实时处理平台AgiM2M核心技术1：分布式环境下采集接口集数据集成服务提供了对多数据源的接口支持，并具有灵活的实时整合规则和高效的数据融合技术，实现了企业中控制系统、远程终端系统、数据库以及企业其它

8、信息化系统的实时的连接与传送支持的接口类型关系数据源Oracle、SQLServer、OleDBOPC/DDEOPCAE、DA、HDA现场总线RS232/485、CAN、ModBus、MB+、Profibus、BACnetFlatFile其它MessageQueueRFID核心技术2：海量数据管理与实时事务处理(1)平台实现了分布式过程数据的实时采集、实时规