中心存储
1. 传统数据库的中心机构存储了所有数据易导致什么失效的风险
数据失效的风险,因为中心存储,一旦发生问题,基本难以挽救。
传统数据库是以数据块来存储数据,简单来说,表字段越多,占用的数据空间就越多,那么查询就有可能要跨数据块。在大型系统中一张表有上百个字段,并且表中的数据上亿条也有可能。因此会带来数据库查询的瓶颈。
数据库中表的记录数是多少对查询的性能有非常大的影响。而一般的解决办法是分表或分库,用来平衡数据库运算的压力,那么又会带来新的问题,如:分布式事务、全局唯一ID的生成、跨数据库查询等。
(1)中心存储扩展阅读:
传统数据库是关系型数据库,开发这种数据库的目的,是处理永久、稳定的数据。关系数据库强调维护数据的完整性、一致性,但很难顾及有关数据及其处理的定时限制,不能满足工业生产管理实时应用的需要,因为实时事务要求系统能较准确地预报事务的运行时间。
2. 哪个存储产品是中心化存储类的
SAN等。
一般来说,中心化存储类的产品包括SAN(StorageAreaNetwork)、NAS(NetworkAttachedStorage)、DAS(DirectAttachedStorage)以及其他可用于数据存储的设搭差备。
这些产品通常具有良好的性能,可以提供高冗余性和容错性,并可以使用高速网络和现代Input/Output设吵念备提供实时数据传输。升枝困
3. 数据中心存储容量
数据中心存储容量是2000EB。
现在全世界每天会产生大约2.5EB的数据大约是250万TB,虽然不是所有数据都会被传到互联网上。但是很明显,现有的储存空间是不够满足我们使用的,尤其是现在大家都把信息存储在云上,而不是花时间删东西,并且数据是一直增长的,短时间内是不会减慢的。
据IDC最近的一项研究表明,在2025年也就是5年后,全世界包括亚马逊的云服务器和你的手机在内的数据总量将会超过16万EB,其中40%是需要被储存的,这么算下来,就有大约640亿TB的数根据需要储存。
不同的数据中心有不同的睁迅特点:
银行系统的数据中心存的是用户资枝磨料和帐务信息,软件下载站点的数据中心存的是各种软件资料。不同的数据中心根据自身的特点一般都有自己的一套管理流程,如备份规则,备份层次,恢复措施,紧急应急措施等。
历史数据如何处理要由数据类型和数据量以及数据的使猛早斗用频度来决定。对于存档性质的大量数据,多采用大容量低速硬盘或磁带进行备份;而小容量数据一般直接存到数据备份服务器中就可了;对于非重要数据,可采用推进式备份,既可保证一定的备份量又能降低空间开销。
4. 为啥要用NAS来作为数据中心虚拟化存储
同样,虚拟机在物理服务器间迁移以实现整个环境效率最大化时,在这些服务器间共享的网络介质要实现快速的切换和转换。
如果说所有的虚拟化环境都有一个共同的主题,那就是数据中心虚拟化存储空间需求。尽管现在市场上更倾向于使用StorageAreaNetwork(SAN)技术,但是NetworkAttachedStorage(NAS)也能满足企业数据中心这方面的需求。
网络存储的实现有两个主要的方法:NAS和SAN。这两种方法在网络架构以及在网络客户端上的表现都有所差别。NAS设备利用现有的IP网络和传输文件层接入,提取它可用的物理磁盘,并以网络共享的方式向使用诸如CIFS或NFS的终端客户机提供一致的文件系统。NAS设备对网络方式的文件共享进行了优化,因为它们与文件服务器几乎是相同的。
相反,SAN技术,包括FibreChannel(FC)和iSCSI,实现数据块层访问,放弃文件系统抽象并在客户端表现为未格式化的硬盘
。FC是目前最流行的SAN技术,它运行在一个专用的网络上,要求在每个服务器上使用专属的FC交换机和主机总线适配器(HBA)。而FibreChanneloverEthernet(FCoE)是一个补充的新标准,它将存储和IP网络合并到一个聚合交换机上,但是它仍然需要在每个服务器上使用特殊的聚合网络适配器(CNA)。
而另一个数据块级技术iSCSI则在IP流量中封装了SCSI命令,同时能够使用现有Ethernet网络接口适配器,但是它一般会增加一个TCP/IP卸载引擎(TOE)来优化性能。SAN解决方案在性能方面相对于NAS设备具备一定的优势,但也存在一些争议。SAN阵列的一个分区能够在两台主机上共享,但是这两台主机都会将空间看作是自己的,这样这两台主机之间就会有空间争夺的风险。虽然有一些方法可以解决这个资源争夺问题,但是这个修复方法会增加额外一层的抽象——而NAS解决方案已经包含这一层抽象了。
两种类型的虚拟化存储数据中心都有各自的作用。例如,Microsoft的Exchange服务器只支持通过数据块级访问数据的网络存储。由于SAN的性能一般比NAS解决方案好,所以企业会在高I/O要求的应用中使用存储网络,如数据库。然而,出于实际管理虚拟机镜像库的目的,文件级访问很可能是许多环境中最简单的部署方法。根据组织的不同要求,数据中心经理可能会要求存储团队实现文件级存储,或者直接安装一个专用的NAS设备来满足他们数据中心虚拟化存储的需求。
虚拟化环境中NAS的替代方法
虽然许多人将NAS设备看作是支持虚拟化环境的最清晰的方法,但还有许多替代方案。对于已经部署了SAN的组织来说,他们可以使用NAS-SAN混合解决方案,在SAN可用空间之上再建立文件系统抽象。一个混合解决方案可以创建数据中心经理更喜欢的抽象层,同时保持中央存储网络的性能和可管理性。较小型的组织也可以考虑共享物理服务器上直接附加的存储空间,使用其中一个服务器作为中央存储库,而其余服务器则从这个服务器获取VM镜像。虽然这个解决方案可以在最小型的环境中运行,但是在较大型的环境中它可能很快就会导致I/O瓶颈。
虚拟化中NAS的网络设计注意事项
对于网络管理员来说,万幸的是NAS设备所依赖的文件共享和传输协议与大多数文件服务器是一样的,所以部署使用NAS的设计方法是非常相似的。然而,由于虚拟化环境的本质和所涉及的文件较大,所以在目标服务器上传输这些虚拟机镜像时需要尽早地考虑一些特别的注意事项。
网络管理员在进行NAS部署时应该保证所有相关的连接至少使用GigabitEthernet。他们也必须验证连接虚拟环境的网络交换机使用的端口数足够,从而能给存储设备提供足够的带宽。管理员也应该再次评估可能影响服务器和存储之间连接的QualityofService(QoS)策略,并在需要时对它进行调整,可以给予增加的存储流量更高的优先级。在NAS部署前后都进行网络基线设置可以清晰的认识到添加NAS设备到数据中心网络所产生的影响。如果性能出现问题,那么通过VLAN或专用交换机对网络的存储流量进行划分也是一个解决方法。
网络管理员应该与数据中心经理紧密协作,一起进行性能测试和比较NAS设备上可用的各种网络协议,一般是NFS和CIFS。这两种标准的实现会因为网络设备、操作系统和虚拟化存储方案的不同而差别很大。由于平台的差异,以及组织的不同需求,每个可用方法的性能测试都将会帮助您确定特定环境中的最佳解决方案。
最后,网络管理员和数据中心经理在数据中心中部署一个NAS设备时需要注意那些可能超出技术支持容量的增长。网络存储的作用可能快速地增大,从而导致I/O瓶颈和其他问题。虚拟环境快速修复可能会像滚雪球一样成为一个企业存储解决方案,特别是在小型组织。可以肯定的是,即使是很小型的NAS部署都会讨论向更包容的企业网络存储战略发展。根据不同需求,如果企业需要更高的吞吐量,那么网络存储可能需要增长为较大规模NAS的解决方案或迁移到SAN的解决方案。
5. 谁能简述三大网络存储
三大网络存储:
1、前端存储
所谓前端存储,是在网络视频监控系统的前端设备(如网络视频编码器或网络摄像机)中内置存储部件,由前端设备直接完成监控图像的本地录制和保存。
前端存储具有几个方面的优势:一是可以通过分布式的存储部署,来减轻集中存储带来的容量压力;二是可以有效缓解集中存储带来的网络流量压力;三是可以避免集中存储在网络发生故障时的图像丢失。
对于前端存储,由于单个前端编码设备通常所带监控点路数不多,存储时间也不长,所以对存储容量要求不高,网络摄像机一般用CF卡或SD卡,视频服务器一般用内置硬盘。
这与以往单机存储相比,基本没有区别。
而与以往单机存储本质上不同的是,为了保证用户访问的灵活性和便捷性,网络视频监控系统中的所有前端存储除了要能够提供点对点的单机访问外,还要能够通过一个统一的接口提供所有内容的集 *** 享。
为此,网络视频监控系统通过中心业务平台对所有前端吵察存储进行统一管理和调度,并实现存储空间和存储内容的网络化。
这样,用户既可以直接登录单个前端设备进行录像资料的点播回放,也可以统一登录中心业务平台进行所有前端录像资料的集中检索和回放。
2、中心存储
在网络视频监控系统中,部署得更多的是中心存储。
前端设备采集监控点图像并编码压缩处理成数字监控码流,然后通过网络传送到中心业务平台,由中心业务平台将码流分发给网络录像单元进行集中存储。
在很多大型的视频监控联网应用中,也可采用多级分布的中心存储方式,即分中心存储,这样一方面可以降低一个中心点集中存储带来的存储容量和网络流量的压力,一方面可以大幅度提升系统的可靠性。
使用中心/分中心存储,在以下几个方面具有明显优势:一是对于用户而言,检索和调用录像资源更为方便;二是存储内容的完整性更容易保证,不会因为某个前端设备失窃或损坏而导致重要内容的丢失;三是可以合理的进行资源调度,为前端设备按需分配存储空间,从而节约资源;四是有利于制定多样化的存储策略,以满足用户的个性化需求;五是维护方便,便于集中检测和及时排查问题。
对于监控点路数比较少、存储时间要求不长的应用场合,中心/分中心存储可以采用服务器插硬盘或外接磁盘柜这种比较简单的方式进行部署,称为DAS(直接访问存储),与单机类似。
而随着网络视频监控的优势被广泛认可,侍伍现在开始出现越来越多的大型甚至超大型视频监控系统,比如“平安城市”建设中的社会面治安监控系统、中国电信和中国网通正在全面推进的“全球眼”和“宽视界”这两大运营级视频监控系统,这些监控系统都面临着前端设备的大规模接入和大容量集中存储的需求。
以往的单机存储方式无法满足这些系统在容量灵活扩展方面的应用需求,必须采用更为先进的网络存储设备和存储技术,其中典型的就是SAN、NAS以及iSCSI。
SAN(存储区域网)起源于上老碰或世纪九十年代中后期,与DAS不同,SAN基于光纤通道技术,服务器和存储阵列之间通过光纤通道交换机连接,形成专用于数据存储的区域网络。
SAN采用了面向网络的存储结构,数据处理和数据存储分离,具有存储空间易于扩展、寻址灵活、可远距离传输数据、I/O性能高、存储设备利用率高等特点,是一种全新的存储体系结构。
与SAN基于专门的光纤通道协议不同,NAS(网络访问存储)基于IP网络实现服务器和存储阵列的互联,使用TCP/IP协议进行通信,以文件级的I/O方式进行数据传输。
相比之下,NAS设备的安装、调试、使用和管理更简单,部署成本也相对较低。
iSCSI是IETF一种新的标准协议,即透过IP网络,将SCSI区块数据转换成网络封包的一种传输标准,它和NAS一样透过IP网络来传输数据,但在数据存取方式上,则采用与NAS不同的,而与SAN相同的Block Protocol协议。
由此,iSCSI给用户带来的价值在于:第一,iSCSI使SCSI数据包在以太网中传输成为可能,使SAN摆脱了昂贵的光纤网络,通过IP网络即可实现原先的功能,既降低了管理复杂度又降低了成本;第二,由于用户应用需求的复杂性,往往会同时部署SAN和NAS两种存储网络,而iSCSI则可以将两者融合起来。
iSCSI的这些特点非常契合现在的视频监控发展的现状和方向,特别是在运营级视频监控领域,存储的规模大、投入高,基于目前成熟的IP网络进行中心/分中心存储系统的构建,iSCSI技术无疑是一个很好的参考。
3、混合型存储
对于视频监控网络比较复杂,对存储安全性和可靠性要求又非常高的应用场合,可以采用既有集中存储也有前端存储的部署方式,兼有二者的优势,并规避可能存在的风险,是一种比较好的选择。
但会带来管理的复杂度和高昂的建设成本,需要根据具体情况而定。
6. 如何通过智能路由搭建家庭存储中心
智能路由器+移动硬盘的优点和不足
智能路由器+移动硬盘,这个方案最大的优势自然是省钱。不过,总让人觉得不太“专业”,实际上,不少智能路由器已经对存储方案进行了优化,像迅雷脱机下载,几乎是每个智能路由器的标配。而在文件共享方面,这一方案主要取决于智能路由器的固件或插件对于文件共享的支持程度如何。
随着云存储重要性的提升,大多数智能路由器也在这方面进行了改善,这样,文件多平台共享、远程操作等也都可以实现。当然,这一方案也存在不足,即其传输速率略显不足,尤其在在使用中低端智能路由器时。由于路由处理器的性能较低,文件传输速度在5MB/s甚至更低,这样的速度,在面对多设备访问或者有高码率的高清视频播放需求时,还是略显不足。所以,有这方面需求的用户,在使用这一方案时要注意。
智能路由+移动硬盘方案组建难度不高
如果只从硬件角度考虑,智能路由器+移动硬盘方案实现起来非常简单,只需要将移动硬盘插入智能路由器的USB接口,顶多在供电不足时,考虑外接供电就可以了。而在移动设备端,一般只需要安装路由的应用或是ES文件管理器这样的第三方管理器,就可以顺利访问移动硬盘上的内容。但由于各种路由器设置有所差异,我们很难统一说清各种智能路由器的共享设置。但一般来说,只要在智能路由器的设置中,找到文件共享选项,并设置硬盘上的共享目录就可以了,操作起来是比较简单的。
注意散热性和移动硬盘的接口
要用移动硬盘构建家庭云存储中心,除了基本的路由功能外,智能路由器还必须拥有USB接口,才能接入移动硬盘。当然,我们还要注意智能路由器是否在固件或插件上提供对存储和文件共享的支持,以减少搭建家庭云存储中心时的波折。另外,智能路由器的散热也必须重点考虑,要知道,在接上移动硬盘并开启文件共享后,路由处理器的负载将加重,从而导致路由器发热量增加,对于那些只要温度一高,稳定性就立马降低甚至死机的路由器来说,那可是不可承受之重。当然,从智能路由器的官方信息,我们难以得知其散热表现,但我们可以在电商网站或者产品论坛,看看使用者对其评价如何,尤其是在夏季时,是否有网友反映其频繁死机等,这样就可以粗略得知某款智能路由器的散热设计能力。
虽然从搭建家庭云存储中心的角度考虑,USB2.0端口并非性能瓶颈,但考虑到USB3.0接口的移动硬盘价格已与USB 2.0接口的相差无几,且移动硬盘往往有独立使用的需求,因此现阶段购买移动硬盘,还是优选USB3.0接口的。如果家里有USB2.0接口的硬盘,就放心使用吧,它不会成为系统瓶颈的。
当然,这也不是说家庭云系统对移动硬盘全无要求,实际上,不少家庭云存储都是7×24小时工作,这就要求移动硬盘有良好的散热和稳定性。在这种情况下,选择使用铝合金外壳的移动硬盘或选择品牌移动硬盘,更有利于让移动硬盘长时间工作。