emc存储虚拟化网关
1. emc的主要产品
EMC的主要产品为企业级服务器存储硬件和软件,以及与存储相关的网络产品。主要有以下的产品: EMC高端存储主要为Symmetrix系列和VNX系列,Symmetrix系列主要有VMAX ,VMAXe,DMX-4,DMX-3。
VNX系列主要有VNX和VNXe两种产品,具体型号有VNX5100,VNX5300,VNX5500,VNX5700和VNX7500. 2015年10月,EMC公司和VMware宣布,通过结合其各自的云能力,以及现有的Virtustream云产品,计划打造EMC联邦全新的云服务业务,新业务将在Virtustream品牌下运营。Virtustream将由VMware和EMC联合拥有,由Virtustream首席执行官Rodney Rogers领导。双方正在敲定交易的最终协议。从2016年第一季度开始,Virtustream的财务业绩将整合至VMware的财务报表中。
Virtustream将集成这些资产,为客户提供统一的基础设施即服务产品,旨在通过一个包含全方位服务和部署选项的产品组合,支持完整的业务工作负载。该业务将集成现有的本地EMC联邦私有云部署,并将其扩展至公共云中,让开发者、管理者、架构师和终端用户保持共同的使用体验。Virtustream的云服务将通过合作伙伴直接交付给客户。 DSSD D5可以提供高达10,000,000的IOPS,延迟仅为100微秒,带宽则可以达到每秒100GB,5机柜配置的裸存储空间则为144TB。该系统可以被最多48个直连客户端进行冗余访问。它采用了al-ported PCIe Gen 3以及NVMe服务器闪存技术。EMC在搭建D5闪存模块时还采用了裸NAND颗粒。
每台D5包括36个闪存模块,可用空间为36TB、72TB或者144TB。在可靠性和可用性方面则提供了DSSD专有的Cubic RAID、动态损耗均衡、闪存物理控制以及系统闲时垃圾回收等技术。
2. 存储虚拟化网关概念界定
虚拟存储是把多个存储介质模块通过特定的技术手段进行集中管理,形成一个整体化存储池,提供大容量、高数据传输性能的存储系统。存储虚拟化将磁盘阵列或磁带库等实际磨闷掘物理存储设备作为统一资源池,通过虚拟化技术和管理软件等手段将后台物理存储设备在系统前端虚拟成逻辑卷,应用服务器只需访问前端的逻辑卷,无需知道数据具体存储物理实体的类型和位置。
面向虚拟存储应用的网关能够满足存储集中管理、数据安全保护及云计算建设等需求,提供异构存储整合,从而形成多类型、多存储格式的中央统瞎核一管理的存储库;允许主服务器应用更灵活地获得存储容量,帮助提高存储空间的使用率;使主服务器应用与物理存储基础设施的变化相隔离,提供故障自动切换等高可用功能;能够自动精简配置流程,实现灵活全面的虚拟存储配置等存储虚拟化管理功能。同时,
存储虚拟化网关能够将相关服务器、存储硬件罩敬和应用软件组合为高可用性和高性能的解决方案,形成存储高可用集群。
3. 如何使用虚拟化软件实现双活灾备系统
灾备双活如何实现数据同步?
问题1:金融系统中同城灾备如何实现数据实时同步(两地是异构存储),请软件推荐和方法?
问题2:如果是远距离(1000KM)异地灾备双活,如何较好的实现数据同步?
希望获得:具体解决, 注意事项, 实例参考
问题1:金融系统中同城灾备如何实现数据实时同步(两地是异构存储),请软件推荐和方法
问题2:如果是远距离(1000KM)异地灾备双活,如何较好的实现数据同步?
A1:数据实时同步复制有两种大的分类:
1)存储复制 - 即使异构存储也能,只不过效果差点。利用虚拟化网关集群设备(比如VPLEX)。但是有一个缺点,存储层面的块儿复制,解决不了逻辑校验的问题,有可能同步过去的块儿数据,数据库无法识别。
2)数据库层面的复制,Oracle、db2都有。是基于日志的复制,数据复制量很小。很安全。但是灾难时刻拉起数据库的时间也不是很理想。有条件的做一下自动化开发。
wangj0923技术经理 , 工行
存储复制最大的问题是,复制过去的磁盘对数据库来讲突然下宕后挂上的,有可能不识别,即便识别了,也要进行一致性校验,那个时间是无法忍受的。
数据库复制的问题是同步模式对主库的影响较大,备库出问题容易hang主库,而异步模式无法确保RPO为零。
需要各种技术组合起来用。
shenxzh系统工程师 , Nanjing Securities
同城灾备,如果是ORACLE数据库,可以使用远距离RAC,实现同城双活数据中心(通过ORACLE ASM实现异构存储双活,或者存储虚拟设备VPLEX,SVC等)
远距离异地灾备,最好使用主备模式,采用dataguard利用异步模式(或采用12C的far sync功能),保证数据安全
else_xie系统运维工程师 , PICC
cz_doctor、xk2008赞同了此回答
首先要确定,实现要异地实时同步,生产环境答应吗?
另外带宽,速度的压力,成本投入能答应吗?
每一个数据的修改交互,都需要问1000KM外的,是否OK了。然后才下一步?那多累的,估计某些应用可以,同步数据少的,对业务性能不敏感的。
现在很多存储的复制技术,异步效果也趋于同步效果,只要业务压力在可接受范围内,就能及时传送数据过去,只要自己明白,如果遇到业务高峰时,是要承受数据传输滞后比较明显的结果而已。
另外,对复制同步的数据,如果不是在线进行使用的,要定期的验证检查,反正数据已经是“带病”的,还一直在同步,哪天真的要用,才发现,那就迟了。
zhoujia8218(提问者)
你的这些反问点,都是我要关注的和不明确的地方,谢谢提醒
nitkey系统架构师 , ECT
xiaoyaozi赞同了此回答
问题1:异构存储要实现同城实时同步有几种实现方式:1.存储前面加一层虚拟网关,通过虚拟网关来实现两个存储的数据同步;2.操作系统层面,通过LVM或者veritas的卷管理软件实现;3.通过应用层自己实现数据同步,比如ORACLE的DG,DB2的HADR。同城实时同步一般对架构环境的要求都较高,如果再加上是异构存储,要特别注意两个存储的性能是否匹配,否则会出现短板
问题2:1000KM以上我认为基本上只有靠存储的异步复制,通过数据库的复制方式在远距离的案例上不是太多。
孔再华数据库运维工程师 , 中国民生银行
同城灾备可以做到对等双活。相当于双中心不差别提供服务。数据库技术有DB2 GDPC和Oracle Extended RAC。DB2 GDPC集群底层通过GPFS集群文件系统完成数据同步,支持异构的存储。
远距离灾备如果需要双活肯定是有很大限制的。首先数据不可能实时同步,代价太大。因此对一致性要求高的系统几乎不可能。但是如果使用异步的方式,例如DB2的HADR技术,或者是CDC等数据逻辑同步技术,能够做到同步数据,但是灾备服务器只能用来做查询分析等作用。
zhoujia8218(提问者)
CDC远距离复制时有没有需要注意的吗?我们只用过同城的,远距离的没有尝试过
4. 如何使用NFS和NAS解决虚拟服务器存储问题
然而,这样的灵活性有一个条件:物理机能够看到所有虚拟磁盘镜像。这通常会导致存储网络成为一个使用网络文件系统(NFS)和虚拟网络附属存储(NAS)集群的开放网络。
在传统基于块的存储中,如iSCSI和光纤通道存储区域网络(FC SAN),这意味着我们必须能够分配和操作逻辑单元号(LUN),以便在迁移虚拟机时可以迅速重新分配LUN给其它物理机。这个操作不仅是在最初部署时很难执行,随着环境越来越大和复杂,它也会很难执行。要为每个虚拟机分配一个LUN,然后还要能够迅速地将它重新分配给其它物理主机,这对IT人士来说已然是一个越来越严重的问题。
在越来越多的环境里,IT管理员都开始使用更大的LUN来承载多个虚拟机。尽管这可以减轻分配多个LUN给多个虚拟机的重担,但无法解决分区和LUN增长的问题。
NFS解决方案
现在,VMware支持通过NFS启动部署虚拟机。通过可启动的NFS加载(mount)部署虚拟机是解决这个问题的一个理想方法,而且也被越来越广泛地接受。
NFS是一个客户端或服务器系统,允许用户跨网络访问文件,并能够像操作本地文件目录一样操作这些远程文件。它是通过输出(exporting)和载入(mounting)两个过程完成的。输出过程是指NFS服务器向远程客户端提供文件访问的过程;载入过程是指文件系统对操作系统和用户变为可用的过程。NFS主要用于Unix-to-Unix文件共享,即使你的所有虚拟机都是基于Windows的,你也可以选用NFS。尽管Windows无法引导NFS,但VMware将NFS建立在它的磁盘虚拟层,所以Windows无需引导NFS。
NFS工作站很容易创建和操作。每个物理服务器都能看到所有的虚拟磁盘镜像,而且VMotion等功能也更加容易操作。与iSCSI或FC SAN中的每个VMDK创建一个LUN不同,你可以在一个NFS卷中共置多个VMDK(VMware Virtual Disk)文件。因为VMDK只是文件,而不是真正的磁盘。为什么使用NFSNFS让存储和VMware管理员的工作变得容易得多,而且在很多VMware环境下都不会有任何性能损失。除了一些例外的存储厂商提供虚拟化解决方案以外,LUN管理对存储和VMware管理员来说都很具有挑战性。而有了NFS执行,与单个文件系统的交互让VMware镜像供应更加容易。
访问控制通过内置NFS安全性被启用后,可以向一组VMware管理员提供NFS文件系统。有了NFS,就不需要微操作每一个LUN了。例如,VMware镜像在文件夹中可以根据应用类型进行分组,而且可以同时提供给一系列应用使用。
此外,访问路径是基于传统的以太网,这不仅节省了成本,也更加易于进行故障检修。因为,大多数企业对于IP管理的了解要远远多于对FC管理的了解。
NFS有一个优点就是访问简易。所有ESX服务器都可以连接到载入点(mount point),这使得VMotion的使用更加容易。在FC部署中,每个ESX服务器都必须能够看到所有其它ESX服务器的LUN,这很不利于配置和管理。NFS是一项共享技术,所有共享访问都是内置的。
NFS的另一优势在于数据保护方面。尽管通过NFS提供的VMware镜像无法使用VMware VCB,但Unix或Linux主机可以载入这些镜像来进行备份。利用支持NDMP的备份软件可以备份这些镜像。通过Linux主机的方法可以访问VMware镜像,而且可以通过这种方法可以载入快照和备份卷。此外,你还可以综合利用NFS主机的复制工具保障业务持续性和灾难恢复,而不用购买VMware专门的复制工具。
说得直白一点,NFS不是唯一的协议,它也有不太适合的时候。例如,Microsoft Cluster Service必须有成组存取(block access),而且有些情况下就需要光纤通道。iSCSI有一些很独特的功能,其中一个是它能够直接分配一个LUN给一个子操作系统,而不用通过VMware磁盘虚拟层。这些独特的功能可以快速地将特定的LUN转移出VMware环境。
这个执行需要的不仅仅是一个标准的文件服务器或NAS,因为除了保存用户数据以外,它还是架构的一个关键部分。
利用虚拟NAS集群解决I/O问题
通过NAS集群虚拟化可以缓解某些物理存储相关问题,如I/O限制。
随着负荷的不断增加,传统的NAS无法有效地扩展升级。部署多个物理服务器会迅速加重I/O带宽的负担,这样的负荷比在多数文件服务器环境中的负荷要大得多。要减轻I/O带宽负担,就必须部署更多的NAS,而这又会导致NAS蔓延。
这使得我们必须在满足额外的NAS系统需求以解决文件服务需求的同时,还要让这些NAS系统必须能处理虚拟服务器环境不断变化的I/O需求。有了单独的NAS head,VMotion就很难适用了,唯一的其它选择是购买更大的单一的NAS head。在VMware环境下,这样的升级不是因为容量限制而进行的,而是为了提供更高的性能而升级。
下面,我们说说虚拟NAS集群。一个虚拟NAS集群代表着整个ESX环境的一个NAS对象,即使这个对象是多个NAS head。一个虚拟NAS集群是一系列NAS节点,这些节点是作为一个整体被管理的。性能或容量的升级就成为相互独立的事了,I/O性能升级只是连接更多的节点到集群,而容量升级则是连接更多的磁盘,互不影响。
此外,虚拟NAS集群还可以为环境提供冗余。如果集群的其中一个节点出错,该节点的文件系统会自动转向集群中的其它节点。这个功能可以保障数据访问不受中断,对于虚拟服务器环境非常重要。因为,虚拟服务器环境下的一个错误可能会导致几十个虚拟机受到严重影响,多层冗余对于这样的环境就显得尤为重要。
Global Files System
将虚拟服务器从一台物理机迁移到另一台物理机是一项势在必行的工作,它可以给数据中心带来很大的灵活性。而数据中心的灵活性也正是客户所寻求的。相关虚拟磁盘的迁移,尤其是从一个阵列到另一阵列或一个NAS head到另一NAS head的迁移,并不是不可能的任务,但是会非常耗费时间,并且会中断服务。
而在虚拟NAS集群环境下,这就是一件非常简单的工作,而且不会造成服务中断。这进一步提高了虚拟环境的灵活性。例如,如果某台物理机中的好几个虚拟机存在I/O带宽需求高峰期,那么你可以将其它虚拟机磁盘镜像移开它们所在的节点来应对I/O高峰期。这个功能还可以用于虚拟NAS集群中的标准文件系统,因为它们可以根据需求进行重新分配。
虚拟NAS和FC
在VMware近期的白皮书中,基于FC的块I/O仍是一个尚未成熟的I/O性能领导者。尽管有些NAS供应商会对这些结果存在争议,但这并不影响我们对这二者的利用。
首先,不到万不得已不要使用FC。现在市场上有两种不同的产品。第一种是NAS供应商(如Network Appliance)为他们的NAS head提供的FC和iSCSI服务。NAS head必须在NAS文件系统中创建一个封装的FC LUN。第二种是EMC和OnStor等公司提供的网关(Gateway)解决方案,这些解决方案允许本地FC访问存储系统。在EMC的解决方案中,这当然是一个通向Clarriion阵列的网关。OnStor允许你通过它们的NAS网关(NAS gateway)为你现有的存储添加一个有Global Files System的虚拟NAS集群。
5. 如何实现数据中心异地容灾备份
异地容灾,顾名思义就是在不同的地方(异地:可以是同城的两个不同的机房或者是两座不同的城市),构建一套或者多套相同的应用或者数据库,进一步提高了数据抵抗各种可能安全因素的容灾能力,可以对企业应用和数据库起到安全性、连续性等方面的作用。
两大分类
考虑到不同企事业单位对数据安全和业务连续性的要求不尽相同,我们将异地容灾分为两大类:数据级容灾和应用级容灾。
数据级容灾:就是指建立一个异地的数据系统,该系统是本地关键应用数据的一个可用复制。在本地数据及整个应用系统出现灾难时,至少在异地保存有一份可用的关键业务的数据。该数据可以是与本地生产数据的完全实时复制,也可以比本地数据略微落后,但一定是可用的。
应用级容灾:在数据级容灾基础上,在异地建立一套与本地生产系统相当的备份环境,包括主机、网络、应用、IP等资源均有配套,当本地系统发生灾难时,异地系统可以提供完全可用的生产环境。
CDP异地容灾VS传统异地容灾
传统的异地容灾方案大多基于远程复制技术。远程复制是指运用复制技术将数据以同步或者异步的方式存储到异地灾备中心中,其主要实现方式有三种:1.利用主机远程复制软件或硬件 。2.利用存储自身的复制软件。3.利用数据库软件产品。远程复制的方式可以实现数据级的容灾,但是一旦发生灾难,无法保证业务的连续性。此外,一旦出现数据库逻辑错误或人为误删除的情况,远程复制不能修复数据错误,也不能找回误删除的数据,更谈不上100%恢复数据并保障数据的可用性了。
和力记易的异地容灾方案以CDP持续数据保护技术为核心,可以构建异地桌面端或服务器端的文件、数据库和应用的全需求平台,能够防范数据丢失、修复数据错误,还能保障业务连续,全方位满足客户不同的数据安全和业务连续性要求。
6. 市场上有哪些存储虚拟化产品
EMC、曙光、IBM都有等等
7. “EMC存储”是什么
EMC公司是全球信息存储及管理产品、服务和解决方案方面的领先公司。EMC是每一种主要计算平台的信息EMC存储标准,而且,世界上最重要信息中的 2/3 以上都是通过EMC的解决方案管理的。
主要的存储硬件产品有Symmetrix, CLARiiON, Data Domain, VNX等。
EMC 公司简介
信息是一家公司除人员之外最重要的资产。EMC 提供了各种技术和工具,帮助客户释放信息的力量。EMC是一家全球领导厂商,助力企业和服务提供商转变运营方式,以服务的形式提供IT。
EMC公司在全球拥有员工约49000人,2010年营业收入170亿美元,2011年第二季度的综合收入为48.5亿美元,同比增长20%。预期2011年的综合收入将超过198亿美元。 EMC通过创新的产品和服务,加速云计算之旅,帮助IT部门以更敏捷、更可信、成本效率更高的方式存储、管理、保护、分析他们最重要的资产——信息。
利用EMC技术及解决方案,企业可以避免潜在的严重风险,降低信息管理所产生的巨大成本,同时又能充分利用信息的价值来实现业务优势。
我们的客户包罗万
EMC与世界各地的机构合作,它们涵盖各个行业,包括公共事业和私营部门;而且规模不一,从创业公司到《财富 500 强》大企业。我们的客户包括电信,金融、制造商、医疗保健和生命科学机构、互联网服务和电信服务提供商、航空和运输公司、教育机构以及公共事业机构。EMC还为100多个国家的个人用户提供技术、产品和服务。
勇于创新,一路领先
我们与众不同的价值源自持续和大量的研发投入,全球各地数千名技术研发人员,业界最广泛的系统、软件和服务组合,我们自上而下设计、构建总成解决方案的能力,以及我们提供本行业乃至所有行业最佳全面客户体验的承诺。
从2003年到2010年,EMC研发投入总计为105亿美元,而累计用于战略并购的资金则达到140亿美金,EMC并购的公司约有50余家,其中包括VMware、RSA、Greenplum、Isilon等多家在“云和大数据”方向具备高度战略价值的公司。
2010年里,EMC执行了一系列战略计划,以加强公司在企业数据、云计算和大数据方面的技术领导地位和服务专长;同时增强了竞争优势,扩大了市场份额。在研发方面,EMC继续积极投入,投资额占到2010年综合收入的11%。
为了加强技术研发,扩大市场领域,我们在比利时、巴西、荷兰、爱尔兰、中国、印度、以色列、俄罗斯、新加坡和美国本土设立了研发中心,在美国、爱尔兰、巴西和深圳建立了生产工厂。我们拥有国际标准化组织(ISO 9001)最严格的质量管理认证,我们的生产工厂拥有MRP II A级认证。
2010年,EMC财年综合收入达到创纪录的170亿美元。EMC在纽约股票交易所交易,是标准普尔指数的成份股之一。2011年,EMC名列美国《财富》计算机行业最受尊敬公司第二位、美国《财富》500强企业152位。