分布式i_o日志收集系统的设计与实现_詹玲new

《分布式i_o日志收集系统的设计与实现_詹玲new》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、882010，46（36）ComputerEngineeringandApplications计算机工程与应用分布式I/O日志收集系统的设计与实现12232詹玲，马骏，陈伯江，陈维梁，吕睿12232ZHANLing，MAJun，CHENBo-jiang，CHENWei-liang，LVRui1.湖北第二师范学院计算机学院，武汉4302052.中科海量存储技术（北京）有限公司，北京1000833.齐鲁证券有限公司，山东淄博2550341.DepartmentofComputerScience，HubeiUniversityofEducation，Wuhan430074，China2.

2、Sino-TechMassStorageTechnologyLtd.（Beijing），Beijing100083，China3.QiluSecuritiesCo.，Ltd.，Zibo，Shandong255034，ChinaZHANLing，MAJun，CHENBo-jiang，etal.DesignandimplementationofI/Otracecollectionsystemindistributeden-vironment.ComputerEngineeringandApplications，2010，46（36）：88-90.Abstract：Withtherapi

3、ddevelopmentofinformationtechnologyapplication，I/Osystemisbecomingmoreandmorecompli-cated，especiallyinthedistributedcomputingenvironment.InordertoexploretheI/Obehaviorinthedistributedcomputingenvironment，thispaperdesignsandimplementsanoveltracingtoolcalleddistributedI/Otracesystem，whichcansimu

4、ltane-ouslycontroleachnode’sI/Otracecollectingbehaviorinaparalleldistributedsystem.DistributedI/OtracesystemcanalsoreceivetheI/Otracescollectedfromeachnode，thensaveandmanagetheI/Otraces.Thispaperdescribesthedesignconsid-erationsandtheimplementationdetails.Keywords：tracecollection；distributed；s

5、toragesystem摘要：随着存储系统的快速发展，以及实际应用中对存储系统的要求日益苛刻，为了研究存储系统I/O子系统的运行形态，设计并实现了一种分布式I/O日志收集系统，该系统能够通过总控制台同时控制分布式系统的多个节点并行收集分布式系统的I/O日志，为分析和回放分布式系统的I/O日志提供有效的数据，且详细描述了系统的设计与实现。关键词：日志收集；分布式；存储系统DOI：10.3778/j.issn.1002-8331.2010.36.024文章编号：1002-8331（2010）36-0088-03文献标识码：Ａ中图分类号：TP3031前言系统的设计与实现，它实现分布式环境

6、的多节点的日志收集，随着计算机的发展，存储系统目前已处于计算机系统的通过总控程序有效地控制多个存储节点的日志收集，并进行核心地位，在实际的应用环境下对存储系统的数据处理速度、集中式的管理。可靠性和安全性都提出了严格的要求。由于任何一种存储系统都有自己优秀特性，基于实际应用环境对存储系统的测试，2系统结构设计能够更加客观、公平地评测和对比，找到存储系统最能胜任的分布式I/O日志收集系统以分布式环境为基础，通过将测领域。试工具分为控制端和客户端的C/S模式，有效解决了多台测在实际应用中，为了测试实际环境下存储系统的性能，获试机在测试时集中控制的问题，能够高效、方便地实现块级和取日志就是

7、非常关键的环节。常用的日志收集工具都是以单文件级的日志收集。该系统由两部分组成，如图1，分别是总机环境为基础，要进行多机日志收集时操作复杂，得到的日志控制台和日志收集代理。总控制台主要实现分布式环境多个集不能得到有效的管理和进一步的处理。对存储系统的日志节点的管理，对多个节点进行并行的日志收集，接收从收集节收集有两类，一类是文件级的日志，在相同的硬件平台上，不点发送来的日志，并对所有采集到的日志进行管理和分析。同的文件系统的读写性能会有所差异，利用文件级的日志来日志收