Confidential 1 DataDomain技术和产品 SherryWang王从容SystemEngineercwang Cell 13923447567 2 内容Agenda 公司简介技术起源OriginofCOS技术和产品TechnologyandProduct 3 公司简介DataDomain Inc 成立于2001 PaloAlto 加利福尼亚 现在SantaClara投资人 Greylock NEA SutterHillVentures成立之初人员来源 NetApp Legato Sun PrincetonUniversity产品第一次出厂 FCS 2004年2月已有4500多套系统被安装 总容量超过432PB全球用超过2500多用户专利EfficientDataStorage700员工 2008年10月 全球有600多个销售伙伴 4 企业级数据保护系统创立并定义 重复数据删除 理论 10000安装实例 2500客户 432petabytes数据处于DD保护之下技术创新历史 行业第一 DataDomain 领导者和创新者 Confidential NDAONLY 5 市场占有 Dedupe 2007Revenues DataDomain 60 市场占有量 Confidential NDAONLY 6 DataDomainFinancials USDMillion IPOdatedJune26 2007 7 数据存储系统的通用架构 主存储设备 应用服务器 数据库服务器 邮件服务器 文件服务器 存放全部数据 大量 高性能数据存取造价高无保护 需要备份全部数据恢复耗时长高端设备可能有镜像 数据恢复设备 COS tape 备份服务器 存放应用数据的影像注重成本和空间的使用率不在应用服务器的数据线上备份软件存取数据内容不直观专有格式 备份软件管理数据保护建立备份策略 管理catalog数据以基本方式传输bulktransfer用户不能直接使用unbrowsable 8 备份容量的真实需求 Confidential NDAONLY 9 容量优化存储 COS 市场预测 Source TanejaGroupNextGenerationDataProtectionMarketProfile 12 06 M 10 备份 恢复现状调查 仅依靠磁带系统实现数据保护已经不能满足今天的需求超过80 的情况要求在数据失效发生后的48小时内完成数据恢复60 70 的存储管理开销是在备份 恢复领域存储管理员的15 的时间用于恢复操作5 20 备份 恢复作业失败每年每TB磁盘存储产生的相应备份 恢复的成本为 5 935METAGroup April1 2004 11 备份设备比较 磁盘设备VS磁带设备 12 技术起源 为用户解决什么问题 13 数据保护面临的挑战 为何要无磁带化 需要新技术 容量优化CapacityOptimization 用磁盘做备份介质所面临的挑战 14 DataDomain专有技术 COS 15 DataDomain专有技术 COS Confidential NDAONLY 16 数据保留 重复数据删除技术 H I J BACKUPDATALOGICALESTIMATEDPHYSICALREDUCTION MondayIncr50GB7 10 x5GB TuesdayIncr50GB7 10 x5GB K L WednesdayIncr50GB7 10 x5GB ThursdayIncr50GB7 10 x5GB 2ndFRIDAYFULL1TB50 60 x17GB FIRSTWEEK2 2TB7x 8x287GB FRIDAYFULL1TB2 4x250GB 用很少的空间存储更多的备份数据 TYPICALRETENTION10 x 30 x Confidential NDAONLY 17 长期保存数据 用更少的空间存更多的数据 Week1 BACKUPDATALOGICALESTIMATEDPHYSICALREDUCTION April143 8TB10 x366GB April215 2TB12x424GB April286 6TB14x482GB May3112 2TB17x714GB June3017 8TB19x946GB TOTAL23 4TB20 x1178GB April72 4TB8x308GB Over1yearofretentionin3 ofDataDomainprotectionstorage Week2 Week3 Month1 Month2 Month3 Month4 July3123 4TB20 x1178GB Confidential NDAONLY 18 数据恢复 数据无损架构 其他RAID6NVRAM 备份数据的校验CheckSumDedupe writetodiskVerify notify self heal ProtectDataatRestAppend onlyFSSimplelogstructureContinuousscrub Trustbutverify hopeisnotastrategy Confidential NDAONLY 19 设备维护和升级 NVRAM 72小时掉电保护Raid6保护 可以同时坏2块磁盘HotSpare磁盘更换磁盘自动rebuilt数据升级简单 只需要半个小时本地配置备件如果控制器出现故障 更换控制器后 可以迅速重新读取数据 20 效果最佳的重复删除技术Dedupe DataDomainSISLTM DiskSpindles Throughput 200MB sec 100MB sec 50MB sec MostDedupeVendors FCDrives 2xSATAspeed3x 5x SATA SATADrives DDsystemsbasedonSATA DataDomain 21 易于与现有架构集成 3U15 500GBSATAdrivesRAID6NVRAMN 1Fan2 4Ports5 1 15TBFileSystemSAN Gatewayto EMC HDS Nexsan CIFS NFS NDMPFC VTL Replication 无需中断系统运行进行实施 22 DataDomain的数据保护体系 FC BackupServer PrimaryStorage GigE LAN SAN TapeLibrary 仅用于长期归档 GBEthNFSorCIFS FCVTL 23 Datadomain容灾解决方案 客户端 生产服务器 主存储 镜像存储 备份服务器 WAN 生产中心备份设备 灾备中心备份设备 DataDomainCOS技术数据复制容灾架构磁带用于长期归档数据可从任何一方恢复远程办公室无需磁带设备节省95 带宽以上极大降低广域连接造价 24 DataDomain数据保护解决方案 广域网入库 数据中心 远程办公室1 Clients DD DD 介质服务器 DD Clients Clients 备份服务器 DD 磁带库 存档 WANVaulting通过广域网数据入库 远程办公室2 远程办公室3 介质服务器 介质服务器 25 一个真实的金融客户应用实例 WAN India home Boston SanFrancisco BackupData BackupData BackupData NewYork home DIRA 数据源 远程站点 目的地 数据中心 95 99 BandwidthReduction 95 99 1 5 95 99 1 5 95 99 1 5 TrueDR lowersWANcosts improvesSLAs 26 WANDR DDinlinededupe replication 数据只有被存放的本地之外的其他地方才是安全的 其他的D2D备份 远程数据的恢复通常是用镜像数据取代主数据 Replicateduringbackup Storetocachededupe replicate ortape truck DR Ready DataDomain OtherD2D TIME 27 DataDomain专有技术 COS 利用用户现有的备份设施和备份软件数据备份到磁盘并被保存在磁盘上 其造价与磁带相当快速剔除数据冗余 deduplication 外加传统数据压缩20 x在数据的保存期内可达到数据可恢复性的持续检验容灾环境下的数据异地复制WANVaulting 入库 自动得数据异地转移使用有效资源 广域网WAN 只复制压缩后的数据 28 Industry sMostScalableInlineDedupeSystems Appliance GatewaySeries DD510 DD530 DDXArraySeries DD580 DD580g Replicator VTL OST RetentionLocksoftwareoptions DD565 Upto16ControllersInternalorExternalStorage DD120 DD690 DD690g 29 DD500系列 Performance Reliability Replication Cost 30 总结 关键技术特征 与现有架构无缝集成无需中断或替换现有设备数据保留 重复数据删除以更少的空间存储更多的数据数据恢复 数据无损架构Trustbutverify hopeisnotastrategy数据复制 极大的降低对广域网的带宽需求真正的灾难恢复解决方案大为降低WAN使用成本有效提高SLAs绿色环保 只是传统备份产品耗电的2 5 31 DataDomain 赛门铁克战略伙伴联盟 公司高层的定期互动60 DD产品和NBU或BackupExec一起工作和Netbackup一起支持新的面向磁盘存储的OST协议 优化备份效率和远程复制功能的灵活管理 32 DataDomain的部分客户 33 DataDomain的部分客户 34 DataDomain的部分客户 ScientificDesign Inc Och ZiffCapitalManagementGroup CapitalManagement 35 DataDomainFinancialCustomers 36 测试结果 一 备份与恢复 BCV的数据每天凌晨12 00实施同步 做营业数据库的全备 备份数据量 680GB备份速度 65M S备份时间 3小时此次测试取第二次的数据库备份数据做数据恢复 测试结果 数据库恢复成功 恢复速度 82M S恢复时间 2 5小时 包括recover时间 37 测试结果 二 重复数据删除 从第二次备份开始重复数据删除的比率 30备份的速度 设备标称速度以NFS格式把详单直接export到磁盘上重复数据删除的比率远远大于数据压缩的比例可以全局压缩 从VTL和NFS读入的数据可以互相使用重复数据删除技术安装用户稳定使用的压缩比为 20 38 中国用户 中国国家外汇管理局贵州烟草西南交通大学大唐电力总公司山西电力辽宁铁法煤矿奇瑞汽车Sybase中国阿斯利康中国摩托罗拉中国 北京 南京 杭州 国航辽宁移动 长盛律师事务所中国石油天然气公司陕西省经济信息中心苏州工业园江西电信宁波工商局阿尔卡特贝尔太平洋保险公司赫斯基中国江苏造船集团 39 成功案例 一 贵州烟草 11个地市分公司将数据备份到DD 其中5个分公司将数据复制到省机关 另外6个分公司将数据复制到省公司 省公司和省机关之间再互相复制备份软件 Legato7 3备份设备 13台DD410 430WAN带宽 2MbSDH压缩比 1 23性能 45MB S 40 成功案例 二 外汇局总局 目前43个分局通过专线以FTP方式将每天的新数据传送到总局 总局将数据备份到DD560 备份软件 Netbackup5 1备份设备 1台DD560压缩比 1 28性能 90MB S数据类型 文件系统 41