数据库中小文件的实时存储与优化.pdf

《数据库中小文件的实时存储与优化.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、总559期第3期河南科技Vo1．559，No．32015年3月JournalofHenanScienceandTechnologyMar，2015数据库中小文件的实时存储与优化张璐杨东芳(1．驻马店职业技术学院信息工程系，河南驻马店463000；2．黄河交通学院机电工程学院，河南焦作454950)摘要：随着物联网、云计算以及大数据技术的飞速发展，小文件的数量正以指数级快速增长，这些小文件的存储给文件系统带来容量和数据处理效率上的压力，而传统的小文件处理机制已经不能满足海量小文件的存储需求，针对小文件的实时存储，一种数据库与文件系统相结合的方案能较好地解

2、决海量小文件存储给文件系统带来的压力。该方案先对小文件进行合并，再用数据库存储小文件的元数据，通过验证，证明了该方案的可行性与有效性。关键词：小文件；文件合并；数据库；文件系统；实时存储中图分类号：TP333文献标识码：A文章编号：1003—5168(2015)03—0008—3Real-timeStorageandOptimizationofSmallFilesinDatabaseZhangLuYangDongfang2(1．DepartmentofInformationEngineering，ZhumadianVocationalandTechni

3、calCollege，ZhumadianHenan463000；2．DepartmentofInformationEngineering，HuangheJiaotongUniversity，JiaozuoHenan454950)Abstract：AlongwiththerapiddevelopmentofInternetofthings，cloudcomputingandbigdatatechnologies，thenumberofsmallfilesgetarapidexponentialgrowth，thesesmallfiles’storageb

4、ringspressureonthecapacityandeficiencyofdataprocessingtofilesystem，andthetraditionalsmallfilehandlingmechanismcannotmeetthedemandofmasssmallfiles’storage，targetingthereal-timestorageforsmallfiles，aschemeofcombiningdatabasewithfilesystemcanbettersolvepressureofthefilesystembrough

5、tbythemasssmallfiles’storage．Theplanmergessmallfilesfirst，thenusesdatabasetostorethemetadataofsmallfiles，throughtheverification，thefeasibilityandeffectivenessoftheschemeareproved．Keywords：smallfiles；filemerging；database；filesystem；real-timestorage随着计算机科学技术的飞速发展，信息逐渐被数据1现有的小文件处理方

6、法化，海量小文件的存储给系统带来巨大的压力。首先文件系统在存储小文件时需要反复请求存储的地址，分配1．1结构化存储存储空间，海量的小文件一起存储就会占用服务器的内结构化存储是在数据库中将小文件整合成一个大文存从而超出计算机硬件的极限；其次，海量小文件的存储件一次性写入，将小文件的内容作为二进制字符串的大使检索效率降低。现有的存储系统由于内存的现状，当字段存人数据库中，由于每个字段都是固定的，而小文件存放文件积累到一定数量，就没法做到有效管理，从而导则是在一定范围内变化的，为了保证数据不因字段长度致检索效率降低，甚至导致系统崩溃。因此，解决小文件不够而丢

7、失，故在设计数据库时会将字段设计得相对比访问性能瓶颈的问题越来越迫切。较大，这样就使小文件内容的存储占据了大量的空白数收稿日期：2015—2—11作者简介：张璐(1981一)女，本科，讲师，研究方向：计算机应用；杨东芳(1979一)女，硕士，讲师，研究方向：计算机应用，算法分析。第3期数据库中小文件的实时存储与优化·9·据，造成磁盘资源的浪费，也会使数据库在进行I／O操作尽其能，弥补了对方的不足b。由于实时存储系统在这时操作时间变长⋯。一时刻和下一时刻传入的文件类型可能不同，不属于同1．2归档文件一个业务，可以根据他们不同的访问字段来对部分常用归档文件

8、是将文件合并后放入文件存档设备，在文字段建立非聚集索引，在不过分影响插入效率的前提下件系统上创