欢迎来到天天文库
浏览记录
ID:42668845
大小:911.22 KB
页数:22页
时间:2019-09-19
《各公司使用的Ceph存储集群》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库。
1、Ceph作为软件定义存储的代表之一,最近几年其发展势头很猛,也出现了不少公司在测试和生产系统中使用Ceph的案例,尽管与此同时许多人Ceph作为软件定义存储的代表之一,最近几年其发展势头很猛,也出现了不少公司在测试和生产系统中使用Ceph的案例,尽管与此同时许多人对它的抱怨也一直存在。本文试着整理作者了解到的一些使用案例。1.携程(Ctrip)携程所使用的各种存储的现状:·商业存储:·SAN(HP/HPS),1+PB,数据库·NAS(HW),800+TB,文件共享·开源存储·GlusterFS,1+PB,数据库备份·FastDFS,
2、1+PB,海量照片·HDFS, 10+PB,大数据而在不久的将来,随着公司业务的发展,携程需要的存储容量需要扩大到10倍以上。携程选择Ceph的理由:低成本+SDS+Scale-out+统一存储+企业特性 携程目前的Ceph集群的配置:·CephVersion:0.94.2,Hrelease·ObjectStorage:RGW+SwiftAPI·SDK:Python/Java/C#/Ruby·OS:Centos6.4·硬件:CPU(2channels&32Core)、Mem128GB、disk(12*3TB/SATAdisk+2*
3、256GBraid1SSD)、NIC(4*GigabitLAN,bond2in1pair)RGW使用架构:携程有在数据中心之间的同步数据的需求。在研究了CRUSHmap、Radosgw-agent、Federategateway(不稳定、不灵活(只支持Zone之间同步)、不易扩展)后,其自研了COS方案,它具有稳定、灵活、扩展性等特点: 下一步的计划:·DatabaseonCeph(Dev&QAFarm)·Openstack/DockerIntegratewithCeph·IT“Dropbox”资料来源:携程在2015/10/18SH
4、CephDay上的分享。楼主点评:·与互联网公司的通常做法一致:慎重选择、细致测试、分布使用(往往从开发测试环境中使用开始)、开源的不够用就自研·希望携程能有更多的分享和回馈社区2.联通研究院中国联通研究院在使用Ceph对象和文件存储: 该集群还比较小,更多的是处于做大规模使用前的准备阶段。其测试环境: 测试结果:他们认为SSD对性能提升的效果一般:资料来源:联通研究院在2015/10/18SHCephDay上的分享。楼主点评:·尚处于小规模测试和试用阶段·使用的测试方法或者调优手段可能没到位,不然性能提高不会那么少3.宝德云(PLC
5、loud)宝德云使用Ceph的理由:·PureSoftware·OpenSource,CommercialSupport·UnifiedStorage:RBD,RGW,CephFS·ScaleOut·SelfHealing·ReplicationandErasureCoding·IntegratewellwithOpenStack宝德云的用法:OpenStack+Ceph(RDB,CephFS)+Docker·所有OpenStack存储都放在Ceph上·18*(5OSD+1SSD)/CephRBD/CephFS·785VM/4vCPU
6、32GBperVM·Ubuntu14.04/Docker1.6.1/150+ContainersperVM·AllVMMountCephFS·MountVMDirectoryasContainer’sDataVolume·Boot1VM<5s·Boot1Container<1s·Boot150+Containers<120s·CephRadosGatewaydriverforDockerRegistry· MapRBDdeviceinsideDockerContainer·CephFSasDataVolume· CephFSasN
7、ASStorage·RunCephinContainers使用案例:宝德云上的爱慕流媒体服务·Runmediaweb/app/dbvmoverOpenStackandCephRBD·UseCephRGWasmediaresourcestorage·PutvideoTransportStream/jpgfileviac-languageprogramme·Manageresourceviapython-swiftclient·400+KBpervideotsfile·Reservedvideots/jpgfile7daysor30day
8、s·Allowmediaservertemporaryaccesstoobjects·ProvidemediaserviceforInternetandIntranetUser资料来源:宝德云在2015/10/18SHC
此文档下载收益归作者所有