基于NoSQL的PDM图文档存储-论文.pdf

《基于NoSQL的PDM图文档存储-论文.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、I匐似基于NoSQL的PDM图文档存储StorageofPDMdocumentbasedonN0SQL夏秀峰。。，徐四鹏。XlAXiu—fenq。。，XUSi—peng。(1．沈阳航空航天大学计算机学院，沈阳110136；2．沈阳航空航天大学辽宁省通用航空重点实验室，沈阳110136)摘要：针对传统基于RDB的PDM系统在图文档存储管理中的诸多掣肘，文章着眼于图文档的妥善存储，将NoSQL数据库加入以HDFS为基础的企业私有云存储平台，共同组建存储资源网。讨论了存储模型的设计思想并提出一种存储系统综合评判模型，通过实验并结合多维属性决策理论得出文件在NOSQL和HDFS

2、之间选择的存储阈值，实现数据分布存储，新的存储模型能够支持大文件的高效存储及小文件的快速响应。关键词：NOSQL；PDM；图文档；非结构化数据；企业私有云中图分类号：TP311文献标识码：A文章编号：1009-0134(2015)02(上)-Ol44-04Doi：10．3969／J．Issn．1009-0134．2015．02(I-)．400引言据库加入以HDFS为基础的企业私有云存储平台中，组建存储资源网。图文档是指与产品相关的信息中以图档或文档形式存在的非结构化数据，如设计任务书、设计规1相关工作范、三维模型、技术文件、各种工艺数据文件、制采用数据库方法存储非结构化

3、数据已有先例。造资源文件、合同文件、技术手册、使用手册等，文献[31采用RDB作为存储底层，将非结构化数据直是制造类企业产品数据管理的主要信息资源。接存储于数据表中，实现了非结构化数据和元数据现有的PDM(ProductDataManagement，产品数的分离式存储和统一管理。文献[4]将文件数据分块据管理)图文档存储几乎全部采用关系数据库(RDB)存入RDB，并对存储过程和执行SQL语句直接存储和文件系统集成的方式实现。随着MBD(Model两种方法进行效率分析得出最佳分块大小。然而，BasedDefinition，基于模型的定义)技术的实施和由于RDB扩展困难，在

4、用户增多的情况下不能提供PLM(Productlifecyclemanagement，全生命周期管高性能服务。文献[5】脱离关系数据库存储思想，采理)的应用，企业中的用户几乎“全员参与”。在围用非关系数据库存储非结构化数据，为云存储提供绕三维模型的整个生命周期中包括需求、分析、设了一种思路。文献[2】中提出基于企业私有云的PDM计、实施等环节会产生大量的图文档，这些数据随系统结构，采用NoSQL数据库作为底层数据支持环着时间推移、产品型号增加等因素的影响，逐步呈境，结构如图1所示。现大数据态⋯，基于RDB的PDM系统在高扩展性、访问层高并发访问和高可用性等方面存在的问题

5、将会日显1)P删软件突出——服务器和用户终端机越来越“高档”、存J应用接口层储设备数量和容量越来越大、用户访问速度越来越(堡旦：!!竺!!!)慢、数据备份时间越来越长。f1集群系统1f数据备份1分布式文件系统II重复数据删除I近年来，出现了以NoSQL为底层的云存储系统，存储管理层I网格计算Il数据加密和容灾J私有存储云平台它既满足高并发读写性能需求，又适用于服务器弹性l存储虚拟化；态监控、服务器负载均衡、网路通信维护升级，口一一目扩展的需求。同时，考虑到部分图文档文件较大，而HDFS(HadoopDistributedFileSystem)能够支持海量簟≈簟簟数据存储

6、，且易扩展，适合那些有着超大数据集的，r应用程序，可以很好地支持百MB及GB级的大文件。⋯南南本文重点研究PDM图文档的存储策略，将NoSQL数图1私有云存储四层结构模型收稿日期：2014-10-14基金项目：航空科技基金(2013ZG54032)作者简介：夏秀峰(1964一)，男，山东青岛人，教授，博士，研究方向为数据库理论与技术。[144]第37卷第2期2015—02(上)、I勺化云存储的核心是应用软件与存储设备相结合，综合以上情况，存储模型采用NoSQL和HDFS以实现存储设备向存储服务的转变，用户通过云存共同支撑数据存储，既可以减轻NoSQL的负担，充储便能使用

7、整个云存储系统提供的数据访问服务。分利用存储空间，又能保证系统的高效存取，提高但面对大量类型多样的非结构化数据，单一的存储HDFS的元数据利用率。系统不能提供高效的访问能力。文献[6】分析了关系2．2存储系统综合评判模型数据模型和NoSQL数据模型各自的特点，提出了一种存储模型是以文件大小作为依据进行数据划可以解决云计算中海量数据存储管理问题的新数据模分，实现小文件存储至NoSQL，大文件存储至型。文献[7】根据存储系统执行操作的响应时间将非结HDFS。为有效减小决策的主观性和不确定性，本文构化数据自适应的存储至相应的存储子系统中。设计了