大数据分析处理平台及应用52.pdf

《大数据分析处理平台及应用52.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、InstituteofSoftware,ChineseAcademyofSciences大数据分析关键技术及在医疗领域的应用汇报人：钟华中国科学院软件研究所2014年1月11日InstituteofSoftware,ChineseAcademyofSciences提纲一．大数据行业应用二．大数据分析关键技术三．我们的工作及案例InstituteofSoftware,ChineseAcademyofSciences一．大数据行业应用InstituteofSoftware,ChineseAcademyofSciences互联网时代人们从信息的被动接受者变成

2、了主动创造者•全球每秒钟发送2.9百万封电子邮件•每天会有2.88万个小时的视频上传到Youtube•推特上每天发布5千万条消息•每天亚马逊上将产生6.3百万笔订单…•每个月网民在Facebook上要花费7千亿分钟，被移动互联网使用者发送和接收的数据高达1.3EB…•Google上每天需要处理24PB的数据…2014/1/144InstituteofSoftware,ChineseAcademyofSciences数据呈爆炸式的增长1GB=2^30字节EBZB1TB=2^40字节PB1PB=2^50字节TB1EB=2^60字节GB1ZB=2^70字节地

3、球上至今总共的数据量•在2006年，全球一共新产生了约180EB的数据•在2011年，这个数字达到了1.8ZB•到2020年，数据总量将会增长44倍，达到35.2ZB，也就是350亿TB5InstituteofSoftware,ChineseAcademyofSciences大数据的4V特征大量化多样化VolumeVariety快速化价值密度低VelocityValue6InstituteofSoftware,ChineseAcademyofSciences大数据应用：互联网与电子商务2014/1/147InstituteofSoftware,Chin

4、eseAcademyofSciences大数据应用：金融来自银行的数据来自网络的数据某位信用卡客户月均刷卡6次，平均通过查看该客户的微博，得到的真每次刷卡金额500元，平均每年打3实情况是：工资卡和信用卡不在同次客服电话，从未有过投诉，按照一家银行，还款不方便，好几次打传统的数据分析，该客户是一位满客服电话没接通，客户多次在微博意度较高、流失风险较低的客户。上抱怨，该客户流失风险较高。2014/1/148InstituteofSoftware,ChineseAcademyofSciences医疗行业的数据具有典型的大数据特征•检验结果,、费用数据、影像

5、、设备产生的感应数据、基因数据等数据量•结构化数据类型•非结构化数据,，如口述、手写、影像、病理等•数据分析往往不是传统的批量处理分析，对于实时运行中的每个时间节点都会产生影响速度•数据以流的方式进入系统，进行抽取和分析•通过对数据进行分析，获取新的知识，拓展新的业务：如实时临床决策支持价值等InstituteofSoftware,ChineseAcademyofSciences大数据潜在的业务应用领域2013-2015，医疗相关的大数据应用规模年度复合增长率将达到111.3%【赛迪顾问】InstituteofSoftware,ChineseAcade

6、myofSciences医疗大数据案例-疾病预防如何便捷、尽早地诊断早期疾病是医学界的一大课题，Seton医疗机构目前已经能借助大数据做到这一点。例如充血性心脏衰竭的治疗费用非常高昂，通过数据分析，Seton的一个团队发现颈静脉曲张是导致充血性心脏衰竭的高危因素，而颈静脉曲张的诊断几乎没有什么成本http://www.199it.com/archives/59439.htmlInstituteofSoftware,ChineseAcademyofSciences医疗大数据案例-语义搜索医生需要了解一位新来的病人，或者想知道新治疗手段对哪些病人有效

7、。但是病人病历散布在医院的各个部门，格式各异，更糟糕的是，各部门都用自己的术语创建病历。一家创业公司Apixio正在试图解决这个问题，Apixio将病历集中到云端，医生可通过语义搜索查找任何病历中的相关信息。http://www.199it.com/archives/59439.htmlInstituteofSoftware,ChineseAcademyofSciences医疗大数据案例-患者互助社交网站PatientsLikeMe允许用户分享他们的治疗信息，用户也能从相似的患者的信息中发现更加符合自身情况的治疗手段。PatientsLikeme

8、还能基于用户自愿分享的数据进行观测性实验，而传统方式的临床实验通常比较昂贵http://www