云计算中的大数据及其处理

《云计算中的大数据及其处理》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、云计算中的大数据及其处理报告资料数据计算语义计算服务计算五.跨界服务技术体系跨界服务三大信息支撑技术为跨界服务解决大数据处理问题《Nature》和《Science》近期出版专刊《BigData》和《DealingwithData》Yahoo首席科学家Raghu将“数据密集型计算”、“CPU密集型计算”列为云计算两大支撑技术.美国权威IT咨询公司Gartner将大数据及其分析列为2012年第一大技术趋势数据计算语义计算服务计算五.跨界服务技术体系跨界服务三大信息支撑技术语义计算为跨界服务解决智能交互问题数据计算语义计算服务计算五.跨界服务技术体系跨界服务

2、三大信息支撑技术为跨界服务解决复杂服务管理问题跨越信息、商业和管理的交叉学科利用信息服务与计算技术来有效地创建、营运与管理商业服务，并最终消除商业模式和信息技术之间的“鸿沟”。三大旗舰学术会议ICSOC、ICWS、SCC。云计算时代挑战：巨大数据计算大数据计算是指规模在P级(1015)-E级(1018)-Z级（1021）的极大规模数据处理。又指传统文件系统、关系数据库、并行处理等技术无法有效处理的极大规模数据计算。5又有称为BigEnoughComputing（相对大、足够大）或Extreme-ScaleComputing（极限级计算）指相对于计算设备能

3、力足够大数据量的计算，如移动设备上的T级数据处理等，内存级的T级数据处理等。麦肯锡咨询机构的大数据定义“Bigdata”referstodatasetswhosesizeisbeyondtheabilityoftypicaldatabasesoftwaretoolstocapture,store,manage,andanalyze……强调是传统数据库技术和工具无法处理的。Wedon’tdefinebigdataintermsofbeinglargerthanacertainnumberofterabytes(thousandsofgigabytes)……

4、强调“Big”只是个相对概念。Alsonotethatthedefinitioncanvarybysector,dependingonwhatkindsofsoftwaretoolsarecommonlyavailableandwhatsizesofdatasetsarecommoninaparticularindustry……强调“Big”对于不同领域或工具软件来说可能差异很大。——麦肯锡咨询公司（全球最大战略咨询公司）Bigdata:Thenextfrontierforinnovation,competition,andproductivity,20

5、11.5.6IBM给出的大数据计算的三大特征Velocity时间敏感Variety类型多样Volume数据量大7Bigdatacomesinonesize:large.Enterprisesareawashwithdata,easilyamassingterabytesandevenpetabytesofinformation.Oftentime-sensitive,bigdatamustbeusedasitisstreamingintotheenterpriseinordertomaximizeitsvaluetothebusiness.Bigdata

6、extendsbeyondstructureddata,includingunstructureddataofallvarieties:text,audio,video,clickstreams,logfilesandmore.ProblemSpace（修改:现代服务典型领域+中文版）7/15/2021BinaRamamurthy20118DatascaleComputescalePayrollKiloMegaGigaTeraMFLOPSGFLOPSTFLOPSPFLOPSPetaDigitalSignalProcessingWeblogMiningBu

7、sinessAnalyticsRealtimeSystemsMassivelyMultiplayerOnlinegame(MMOG)Othervariables:CommunicationBandwidth,?ExaEarthObservationMedicalImage典型应用与问题空间（现代服务行业）计算规模MegaGigaTeraMFLOPSGFLOPSTFLOPSPFLOPSPetaExa数据规模实时系统健康医疗地球观测地球观测数据规模接近E级，计算处理能力要求在P级；大内存需求在T级，传输带宽需求在G级。医学图像数据规模P级，计算处理能力要求在

8、T级；大内存需求在G级，传输带宽需求在M级。3D游戏数据规模接近P级，计算处理能