HCP&HDI的集中上收和容灾方案说明 HDS

《HCP&HDI的集中上收和容灾方案说明 HDS》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、HDSHCP&HDI数据集中和上收方案说明1.数据集中上收和容灾综述对于用户来说，在已经建立全国性数据中心和容灾中心的基础上，重点需要考虑如何将分布于各省市地区的数据集中上收到全国集中的数据中心和容灾中心。根据业界的最新技术，数据收集和容灾备份的传送可以考虑在二个层面完成，如下图：方法一：基于底层的存储复制技术实现，即在分支机构中心和总中心部署可通讯和融合的虚拟化存储池，存储池之间完全基于阵列控制器系统，依托SAN网络和FC协议，进行数据的实时复制，这样的复制可以保证很少的数据丢失，所汇总或容灾的数据在分离后立即可以被总中心的服务器和应用拉起来使用，是数据上收和集中

2、容灾的最佳手段，当然基于存储的数据集中需要稳定的链路和高效的带宽（大于8Mb传输速度），因此在业界主要应用于关键性业务数据的集中，如核心数据库系统；方法二：基于网络层复制集中实现18，即在总中心部署大的云存储容器，二在分支机构部署收集器，通过IP网络将分支机构的数据传送到总中心集中存储，HDS的方案以HCP结合云存储池构成总中心的大型统一存储容器，同时在分支机构中心部署HDI的收集器，分支机构只需要将上传的数据放置在HDI的收集器内，HDI就可以自动将数据上传到总中心的HCP，此方案可以在很小的带宽下完成，当然数据传送有一定间隔（15分钟），同时上传的数据需要以文件

3、形式存档，因此更适用于大数据量的非结构化文件，如果是数据库的上传，分支机构可以将数据库导出为文件存放在HDI，再自动上传到HCP。对于本次系统的建设，规划考虑两种方案的并行使用：·即一方面对于各省的核心数据库数据可以在总中心和各省中心部署可融合的虚拟存储池，在带宽保证的前提下，采用存储实时复制的方法，实现各省到总中心的多对一的数据集中和容灾复制；·对于一些省市无法实现更高的带宽保证，同时非结构化数据量比较大，则可以考虑通过在总中心部署HCP的云存储容器，同时在各省部署HDI收集器将各省数据自动收集和容灾到总中心。以下主要介绍方法二的HCP结合HDI的数据收集方案。1

4、.HCP&HDI方案总体说明HCP结合HDI形成了非常先进的数据收集和容灾方案，这其中包括了HCP存储平台、HDI收集器、HDDS查询器这三个个重要组成部分。1.1HCP云存储平台的说明HCP是HDS最新的面向对象的内容“云”存储平台。它采用了CMDI的云存储接口技术，即与传统文件系统存放形式完全不同的对象型存储方式，当增加一个文件到HCP中，HCP自动产生metadata为这个文件并与这个文件封装在一起作为一个归档目标。当你显示这个内容数据时，HCP文件系统显示每一个目标就像一个文件集。一个文件包含原始的数据文件（与这个文件具备相同的名字），包扩文件的扩展名。当你

5、打开这个目标文件，它看起来与原来的保存的文件一样。18HCP是遵循云存储接口CDMI标准的大型容器，由于是对象型存储，因此可以做到海量数据承载，高达20PB的单一空间扩展，满足全国数据集中上收的需要。同时HCP针对集中上收的数据长期保存或归档需求，可以通过metadata中锁定保存期限，实现在保存期内不可删除和篡改数据的WORM功能。按照HDS统一云存储平台设计理念，先进的HCP内容归档平台是实现归档存储的硬件引擎，即需要连接磁盘系统实现数据存放，在本项目中，考虑存储集中和投资保护，建议在核心存储磁盘阵列中划分归档区，采用其所配置的SAS磁盘，根据需要选用其中的可用

6、容量，可以从6TB-20PB选择，作为分支机构集中到总中心的云存储容器，并可以实现高可用、高性能存储访问。此外，通过内容归档平台引擎进行管理后，可以针对原数据中的文件和目录设定锁定期，保证数据不可篡改。如下图所示：HCP内容归档平台技术架构上采用SAIN架构（SAN-attachedArrayofIndependentNode）。此架构开放性好，同时内容归档平台节点，支持基于开放标准的FC存储和RAID6技术，以及FC、SAS、SATA等各种规格的硬盘。18在存储的部署方面，要求归档节点和后端存储可实现动态配比。如：根据统计，一般归档对象的平均大小是5K，因此归档对

7、象数目会增长较快。因此在未来发展阶段可以依靠增加前端节点的数目提高对象处理性能，而保持存储空间容量和系统结构不变，以实现面向应用的动态高性价比部署。在工作接口方面，HCP内容云存储平台提供NFS/CIFS/HTTP/SMTP/NDMP等标准访问接口，符合工业标准，具有良好的开放性。这样，在未来用户应用系统中，各分支机构中心不断产生的邮件归档、文件归档、数字化影像资料都可以集中到总中心的HCP容器内承载，HCP接口采用常用的统一开放标准，而非私有标准，各种应用可通过最简单的方式来统一访问归档平台系统。1.1HDI收集器的说明HDI是HCP云存储平台的一个延伸，也可