免费试用
新闻动态
高效、安全保护文件中集成的核心业务系统,根据业务需求,提供定制开发。
如何将大数据迁移到云存储
发布时间:2012年08月27日 来源:连用科技

      如今,很多企业的IT管理人员都在考虑将企业数据向云中迁移,云存储逐渐成为一个热门的趋势。如果为目前的信息技术产业搭配关键词,云存储无疑是其中之一。权威技术研究和咨询公司Gartner预测,到2015年,云存储将增长89.5%,市场份额达到28.8亿美元 ;到2016年,共享内容并且能够实现从多个设备上并发访问内容的愿望将促使消费者将超过三分之一的数字内容存储到云中 。越来越多的客户咨询有关将 50TB左右的数据迁移至云环境的问题。从理论上来说,将数据移至云环境是一个很简单的问题,而实际上,有很多重要的问题需要提前考虑,比如:您的带宽有多少?您的数据规模有多大?您需要恢复数据吗?可接受的数据恢复时间是多长?您的云服务提供商允许您来“植入”数据吗(例如,将驱动器或设备发送给客户,由客户在本地备份其数据,然后将驱动器/设备递送给提供商)?您的云服务提供商有基于云的服务器以便您能够直接从云存储恢复数据吗?

      接下来,让我们仔细分析两个计划将50TB 数据移至云端的客户案例。一个客户有一个 T1 线路,而另一个客户则有光纤OC3网络。

      例 1:具有 T1 线路的客户

      50TB 的数据,通过 1.544 Mbps,链路也称为 T1 线路)=       79124 小时或者近 3297 天

      首次通过 T1 备份 50TB 数据(典型重复数据删除率为 57%)= 33549 小时或 1398 天

      连续通过 T1 备份 50TB 数据(典型不间断重复数据删除率为 90%)= 8387 小时或 349 天,这代表了预计 10% 的日增量和 90%的重复数据删除率。在这个例子中,很显然,对于云服务提供商而言,收到每日增量数据的时间并不合理。

      例 2:拥有 OC3 网络的客户

      50TB 数据,通过 OC3 = 788 小时或者近 32 天

      首次通过 OC3 备份 50TB 数据(重复数据删除率为 57%)= 334 小时或 14 天

      连续通过 OC3 备份 50TB 数据(重复数据删除率为 90%)= 84 小时或 3.5 天,重申一下,这代表了预计 10% 的日增量和 90% 的重复数据删除率。云服务提供商仍然没有在 24 小时的时间窗口内收到每天的变更数据。如果要使提供备份或归档数据的时间窗口不超过24 小时,则是一个更大的挑战。

      另外,要说明的一点是,目前假设的是一个仅有最低 WAN 开销无其他网络负载的“原始”环境。但如果您使用这些线路上网、收发电子邮箱或拨打 IP 电话的话,那么,对于带宽和数据传输的时间影响不言而喻。

      下表列出了基于这些相同假设细分的 10TB 数据。


      这就是为什么我们在部署云存储前将需要考虑的问题列举出来,其实将数据写入云只是第一步而已。如果在灾难事件发生的情况下云是您公司的存储资源的一部分,那么将数据找回来特别是备份或者归档数据将更加重要。您的云服务提供商允许您向云端“植入”数据吗?您的云服务提供商有基于云的服务器以便您能够直接从云存储恢复数据吗?如果遇到灾难,您的云服务提供商会将存有您的数据的驱动器递送给您以供数据恢复吗?对这些问题的回答至关重要。

      随着大规模、50TB 数据云解决方案的出现,客户该如何应对上述数学挑战?现在,我要向大家介绍针对这一问题的一个有效的解决方案。在这个案例中,客户与一家云服务提供商密切合作,该提供商能够:1) 让客户将数据“植入”云环境 2) 基于 VMware 构建其计算云以充分利用物理到虚拟 (P2V) 技术。这种类型的云解决方案具有诸多优势。

      首先,向云环境“植入”数据的功能使客户能够将介质递送至云服务提供商,随后只需以在线方式即可发送变更数据。在充分利用了集成数据缩减技术(如源端重复数据删除和压缩)的情况下,这种方式显著减少了所需的带宽。

      其次,一旦出现灾难,客户能够通过服务提供商的云接入口进行数据恢复。由于服务提供商运行了 VMware,客户不仅能够进行数据恢复,还能够充分利用 P2V 技术 — 在 CommVault 的案例中,我们的 Virtualize Me功能能够自动将物理服务器恢复到虚拟机。此外,企业还应当向其云服务提供商询问他们是否能够使用工具来以多流方式将数据传至云,并最大程度利用带宽,尤其是,对于有专用 1Mbps 带宽客户。 

       CommVault的 Simpana 9软件中引入了第三代重复数据删除技术,可以在客户端删除90% 的冗余备份和归档数据。 Simpana 9 使用这种方式将客户端——磁盘——磁带中的重复数据删除扩展到整个企业,将网络中发送的数据量锐减90%,藉此有助于帮助企业显著加快将大量备份或归档数据迁移至云环境的速度。很多客户向我反馈,通过使用现代数据管理功能(如重复数据删除、压缩和多流等技术),显著缩短了他们向云环境迁移大量数据所需的时间 — 从数月缩短至数天,甚至数小时。

      对于将来考虑将硬件及物理设备迁移到“云端”的客户,希望以上的建议也会使他们云存储的部署准备更加充分和周到。因为,我们相信有效规划此类实施对于将数据迁移至云和测试数据恢复目标的成功具有举足轻重的作用。


最新新闻
连用科技助力金融信创数智化转型升级! 2022年浙江银行系统信创发展与推进专题研讨会圆满落幕
赋能企业内容管理智慧化升级,爱图仕携手连用科技达成合作!
连用科技消息,近日,专注于企业非结构化数据管理和应用的服务商连用科技与爱图仕影像签约达成合作。双方就爱图仕的企业数据化管理项目建设达成共识,将基于爱图仕的企业需求和特点,结合连用科技在企业内容数据统一储存管理和数据安全共享协同工作平台的丰富实战经验,构建全新的企业内容管理一体化解决方案,全面赋能爱图仕企业内容管理数字化升级。
连用科技受邀参加PKS安全防护体系解码及路演会
2022年6月23日,连用科技受邀参加了“PKS抢鲜知”系列活动第三期——深度解码PKS立体安全防护体系暨网络安全专场路演会,活动由中电信息指导,中电智方舟、奇安信集团、PK体系生态联盟主办,中电智谷、OUV创客星、深圳信创硬件联盟等企业协办,采取线上线下相结合的形式,20余家网安生态企业和关注网络安全赛道的投资机构,线上线下共计百余人参加。
连用文件安全千兆交换一体机全新上市
连用文件安全千兆交换一体机是由连用科技与安盟信息联合推出的,融合连用文件安全交换管理软件套件和安盟千兆网闸于一体的专业文件安全交换产品,支持跨网文件交换、病毒查杀、数据流向管控、共享协同、审核审批、敏感信息审计、流转追溯、用户行为审计、在线预览\编辑和安全水印等功能,聚焦跨网数据交换的合规性,满足企业网络隔离的等保要求,是健全信息安全管控机制、防止敏感数据外泄、开展全方位协作共享的一体化设备。
连用通过国家标准《商品售后服务评价体系》认证
连用通过国家标准《商品售后服务评价体系》认证
连用助力四川电信建设文件安全共享流转平台
中国电信股份有限公司四川分公司(以下简称四川电信)是中国电信股份有限公司在川设立的分公司,是四川省主体电信企业和综合信息服务提供主导企业,也是目前四川省内事实上承担普遍电信服务、党政机要通信、国防通信、保密通信、应急通信等任务的唯一通信企业。
深圳市禾正医院携手连用打造数据网间交换平台
深圳禾正医院是由深圳合正集团投资控股,深圳市红十字会参股合作的混合所有制医院,医院秉承国际化医疗服务标准和管理理念,以特需和国际医疗服务为主、肿瘤诊疗、康复养护为专科特色,致力打造集医疗、教学、科研、康复、预防为一体的大型现代化综合型医院,是深圳南山区重点民生工程之一。
国资委直属事业单位选择连用文件云
国务院国有资产监督管理委员会(以下简称国资委)干部教育培训中心是国资委直属事业单位,主要承担国资委干部教育培训的组织实施工作,为企业经营管理人员和国资委机关、事业单位干部提供教育培训服务。

留言