非结构化存储数据方案之一[优秀范文5篇]

时间:2019-05-14 21:13:12下载本文作者:会员上传
简介:写写帮文库小编为你整理了多篇相关的《非结构化存储数据方案之一》,但愿对你工作学习有帮助,当然你在写写帮文库还可以找到更多《非结构化存储数据方案之一》。

第一篇:非结构化存储数据方案之一

非结构化数据存储方案

非结构化数据包括文本、图像、音频、视频、PDF、电子表格等。非结构化数据存储通常有两种方式:

1.将非结构化数据以文件的方式存储在文件系统中,同时将指向文件的链接或路径存储在数据库表中。这种方式数据读写的速度较快,但数据管理不方便,并需要额外考虑事务处理的一致性和数据的安全性。

2.将非结构化数据存储在传统的数据库表的大对象字段中。这种方式充分利用数据库的事务、管理和安全特性,但在数据查询和读写的性能不高。

为解决上面两种方式的缺点,利用其所长,最新的非结构化数据存储技术在磁盘格式、网络协议、空间管理、重做和撤销格式、缓冲区缓存以及智能的I/O 子系统等方面发生重大转变,在保证了文件数据的性能的同时,还保留了数据库的优势。较有代表性的就是Oracle SecureFiles非结构化数据存储方式。

第二篇:NAS存储与数据备份方案

NAS存储与数据备份方案

数据备份部分是整个网络系统的关键点,任何原因造成数据丢失都将带来无法估量的损失,因为这些数据涉及到公司各应用系统(包括缺陷、动态成本、点检、物质仓储、大宗物料、生产运营等系统),为了保证各系统的正常运行,必须保证能随时访问生产数据、查询历史数据。一旦发生意外导致数据丢失(包括系统崩溃、数据的丢失等),造成影响难以估计。

NAS(Network Attached Storage:网络附属存储)是一种将分布、独立的数据整合为大型、集中化管理的数据中心,以便于对不同主机和应用服务器进行访问的技术。按字面简单说就是连接在网络上, 具备资料存储功能的装置,因此也称为“网络存储器”。它是一种专用数据存储服务器。它以数据为中心,将存储设备与服务器彻底分离,集中管理数据,从而释放带宽、提高性能、降低总拥有成本、保护投资。其成本远远低于使用服务器存储,而效率却远远高于后者。

NAS数据存储的优点:

1、NAS适用于那些需要通过网络将文件数据传送到多台客户机上的用户。NAS设备在数据必须长距离传送的环境中可以很好地发挥作用。

2、NAS设备非常易于部署。可以使NAS主机、客户机和其他设备广泛分布在整个企业的网络环境中。NAS可以提供可靠的文件级数据整合,因为文件锁定是由设备自身来处理的。

3、NAS应用于高效的文件共享任务中,例如UNIX中的NFS和Windows NT中的CIFS,其中基于网络的文件级锁定提供了高级并发访问保护的功能。

公司现有存储及备份模式已经无法满足日益强大的信息系统,现急需建立一套先进的存储备份管理系统,以合理利用存储资源为基础,突出以数据为中心,实现高效的存储与数据管理,给诸多宝贵的数据提供安全、稳定的环境。

基于以上NAS系统的种种优点,结合公司实际情况,决定采用NAS系统来升级公司的存储与备份现有模式。

下图为目前的拓扑图,需要操作服务器的数量多,数据的完整性无法得

到很好的验证。

下图为添加NAS存储系统后的拓扑图,在不改变当前网络环境的状态下,直接将NAS存储系统连接至二层交换机,快速投入使用,同时支持基于Web的GUI远程管理,大大提升了备份效率。

以后的建议:可逐渐扩大NAS存储系统的应用,利用双机冗余备份,实现数据同时同步的异地容灾备份,拓扑如下:

第三篇:数据存储主要优点建议

数据存储采购建议

随着集团网络的数据量不断增加,网络数据的安全性是极为重要的,一旦重要的数据被破坏或丢失,就会对企业造成重大的影响,甚至是难以弥补的损失。数据存储备份除了拷贝外,还包括更重要的内容即管理。备份管理包括备份的可计划性,磁盘的自动化操作、历史记录的保存以及日志记录等。所有的硬件备份都不能代替数据存储备份,硬件备份(双机热备份、磁盘阵列备份以及磁盘镜象备份等硬件备份)只是拿一个系统、一个设备等作牺牲来换取另一台系统或设备在短暂时间内的安全。若发生人为的错误、自然灾害、电源故障、病毒黑客侵袭等,引起的后果就不堪设想,如造成系统瘫痪,所有设备将无法运行,由此引起的数据丢失也就无法恢复了。只有数据存储备份才能为我们提供万无一失的数据安全保护。

我们早先采用数据存储为“DAS(Direct Attached Storage,直接外挂存储)”的存储方式。这种数据存储的服务器结构如同PC机架构,外部数据存储设备都直接挂接在服务器内部总线上,数据存储设备是整个服务器结构的一部分,同样服务器也担负着整个网络的数据存储职责。DAS这种直连方式,只能够解决单台服务器的存储空间扩展、传输需求,无法满足多台服务器备份的需要。为了满足现在多台服务器所需要的网络存储必须采取支持以下两种方式的存储设备:

一、NAS(Network Attached Storage,网络附加存储)方式则全面改进了以前低效的DAS数据存储方案,它是采用独立于PC服务器,单独为网络数据存储而开发的一种文件服务器。NAS服务器中集中连接了所有的网络数据存储设备(如各种磁盘阵列、磁带、光盘机等),存储容量可以较好地扩展,同时由于这种网络存储方式是NAS服务器独立承担的,所以,对原来的网络服务器性能基本上没什么影响,以确保整个网络性能不受影响。它提供了一个简单、高性价比、高可用性、高扩展性和低总拥有成本(TCO)的数据存储方案。

二、SAN(Storage Area Network,存储域网络)与NAS则是完全不同,它不是把所有的存储设备集中安装在一个专门的NAS服务器中,而是将这些存储设备单独通过光纤交换机连接起来,形成一个光纤通道的网络,然后这个网络再与企业现有局域网进行连接,在这种数据存储方案中,起着核心作用的当然就是光纤交换机了,它的支撑技术就是Fibre Channel(FC,光纤通道)协议,这是ANSI为网络和通道I/O接口建立的一个标准集成,支持HIPPI、IPI、SCSI、IP、ATM等多种高级协议。在SAN中,数据以集中的方式进行存储,加强了数据的可管理性,同时适应于多操作系统下的数据共享同一存储池,降低了总拥有成本。

目前在数据存储方面几大主要品牌:EMC、IBM、HP、DELL等,与其他公司相比中EMC是专业从事数据方面的公司,在数据存储方面有其专业的优势。

利用 EMC 恢复管理解决方案,可以从任何中断或事件中快速、轻松、可靠地恢复业务数据。利用 EMC 恢复管理,您可采用一种全方位的做法,即利用集成式软件的备份、复制、连续数据保护(CDP)、分析和报告来保护数据。它结合了简化的管理,以提供关键业务信息的更高级别的可靠性和恢复能力。

主要优点

一、集中化备份管理 — 跨不同操作系统保护您的关键应用程序和数据库,同时集中执行管理并加快总体备份速度。

二、集中化复制管理 — 以实时或接近于实时的方式将电子数据拷贝移动到本地或远程信息存储库。

三、连续数据保护 — 自动为每一次数据更改保存一个拷贝,以便您能够将数据恢复到任一时间点。

四、分析和报告 — 收集、关联备份操作相关信息并发出警报,包括对备份失败执行根本原因分析。

五、简化管理 — 使用管理控制台查看保护和恢复活动,并确定向何处分配更多资源

EMC 同时有针对 Microsoft SQL Server 的数据保护可满足 SQL Server 的可用性和可恢复性要求。利用 EMC 针对 Microsoft SQL Server 的数据保护,并可利用 SQL Server 中的本机功能实现数据恢复和保护。利用 EMC 行之有效的专业技能满足备份和恢复、SLA 遵守能力、人员职责和基础架构规划等方面的要求。

主要优点

一、提高了数据库可用性 — 使用数据库镜像直接在服务器之间传输事务日志记录,并可快速故障切换到备用服务器。

二、增加了应用程序正常运行时间 — 减少备份窗口以减少对应用程序和系统可用性的影响。

三、减少了业务风险 — 通过内置的硬件冗余、RAID 保护和高可用性确保数据能够快速而准确地恢复。

我们通过对存储方式、存储空间、存储性能的比较,推荐选择的数据存储型号为:

EMC Celerra NX4 磁盘阵列柜 包含1个NAS控制器、2个存贮控制器、7个1TB 7200转SATA系统盘、服务器端工具包、管理软件、三年服务。同时支持光纤SAN、IPSAN、NAS功能。(注:7个1TB硬盘作RAID 5,实际可用存贮空间为5TB。)

第四篇:存储方案选择

第三章 存储方案选择 3.1 存储架构选择

目前主流的存储架构包括DAS、NAS、SAN,下面针对3种主流应用系统做架构分析。

直连方式存储(Direct Attached StorageSAN)。存储设备组成单独的网络,大多利用光纤连接,服务器和存储设备间可以任意连接。I/O请求也是直接发送到存储设备。如果SAN是基于TCP/IP的网络,则通过iSCSI技术,实现IP-SAN网络。

网络连接存储(Network Attached Storage-NAS)。NAS设备通常是集成了处理器和磁盘/磁盘柜,连接到TCP/IP网络上(可以通过LAN或WAN),通过文件存取协议(例如NFS,CIFS等)存取数据。NAS将文件存取请求转换为内部I/O请求。

集中的存储备份,其中性能、数据一致性和可靠性可以确保关键数据的安全;高可用性和故障切换环境可以确保更低的成本、更高的应用水平;可扩展的存储虚拟化,可使存储与直接主机连接相分离,并确保动态存储分区;改进的灾难容错特性,在主机服务器及其连接设备之间提供光纤通道高性能和扩展的距离。目前的SAN的实现方式主要有FC-SAN和IP-SAN 两种,其中FC-SAN采用光纤交换机构建存储区域网,其传输速度可达8 Gb/s和4Gb/s,而IP-SAN采用传统的以太网交换机作为连接设备,其传输速度最高为1Gb/s。

考虑到贵中心数据中心的具体应用,我们推荐使用FC-SAN存储架构,选择8Gb/s的存储设备。3.2 数据备份方案

数据中心对数据的安全性要求非常高,一旦丢失将会带了很大的损失,因此建议对关键数据进行备份,当前主流的备份方式有本机备份、网络备份和LAN-Free备份,每种备份各有优缺点,下面分别对这几种备份方式进行介绍和对比: 3.2.1 本机备份

在本机备份模式中,磁带库直接接在服务器上,而且只为该服务器提供数据备份服务。在多数情况下,这种备份大多是采用服务器上自带的磁带机,而备份操作往往也是通过手工操作的方式进行的。

优点是数据传输速度快,备份管理简单;缺点是不利于备份系统的共享,不适合于现在大型的数据备份要求。3.2.2 网络备份 网络备份中,数据的传输是以网络为基础的。其中配置一台服务器作为备份服务器,由它负责整个系统的备份操作。磁带库则接在备份服务器上,在数据备份时备份对象把数据通过网络传输到磁带库中实现备份的。

网络备份的优点是节省投资、磁带库共享、集中备份管理,缺点是网络传输压力较大。3.2.3 LAN-Free备份

LAN-Free备份是在SAN环境中进行的,是指数据不经过局域网直接进行备份,即用户只需将磁带机或磁带库等备份设备连接到SAN中,各服务器就可把需要备份的数据直接发送到共享的备份设备上,不必再经过局域网链路。由于服务器到共享存储设备的大量数据传输是通过SAN网络进行的,局域网只承担各服务器之间的通信任务,而不是数据传输。

LAN-Free备份不仅可以使网络流量得以转移,而且它的运转所需的系统资源低于网络备份方式,这是因为光纤通道连接不需要经过服务器的 TCP/IP 栈,而且某些层的错误检查可以由光纤通道内部的硬件完成。

因此,LAN-Free备份具有备份速度快、网络传输压力小的优点,而且具有LAN备份所拥有的数据备份统一管理和磁带库资源共享的优点,LAN-Free备份的缺点是成本高。

综合以上对各种备份方式的对比分析,结合贵单位本次数据中心建设的应用及对数据安全性的考虑,浪潮建议采用LAN-Free的备份方式对数据进行备份,当计算机的软硬件发生故障时,利用备份进行数据库恢复,以恢复破坏的数据库文件、控制文件或其他文件,保证用户业务的连续性。3.2.4 光纤SAN存储的优势

存储局域网络SAN(Storage Area Network)以其突出的优势,逐渐为大家所了解并采用。所谓SAN,是在以太网之外建立一个存储的网络,服务器和存储设备均连接到该网络中,架构如下图:

SAN具有如下优点:

关键任务数据库应用,其中可预计的响应时间、可用性和可扩展性是基本要素;SAN具有出色的可扩展性;SAN克服了传统上与SCSI相连的线缆限制,极大地拓展了服务器和存储之间的距离,从而增加了更多连接的可能性;改进的扩展性还简化了服务器的部署和升级,保护了原有硬件设备的投资。

集中的存储备份,其中性能、数据一致性和可靠性可以确保关键数据的安全;高可用性和故障切换环境可以确保更低的成本、更高的应用水平;可扩展的存储虚拟化,可使存储与直接主机连接相分离,并确保动态存储分区;改进的灾难容错特性,在主机服务器及其连接设备之间提供光纤通道高性能和扩展的距离。目前的SAN的实现方式主要有FC SAN和IP SAN 两种,其中FC SAN采用光纤交换机构建存储区域网,其传输速度理论值最高可达8Gb/s,而IP SAN采用传统的以太网交换机作为连接设备,其传输速度理论值可达1Gb/s。FC SAN 的优势很明显,在对数据的传输速度和可靠性要求较高的应用环境,有着IP SAN无法比拟的优势。

系列处理器及SAS 6Gbps高性能磁盘控制器,使系统联机处理性能提升2.5倍以上,数据库性能提升3倍以上,更加适用于基础架构、数据库核心应用。

本方案中云计算平台管理服务器即安装云计算平台管理软件的服务器,主要功能是建立各个云计算计算节点服务器之间的联系的功能服务器;用户通过云计算平台管理客户端来管理云计算平台,同时也实现远程管理,可通过笔记本等设备实现远程管理。为了保障业务运行的高性能和可持续性、可扩展性,我们选择了FC-SAN的模式。首先,云计算计算节点服务器通过两块HBA卡全冗余8Gb光纤交换机连接全光纤存储产品,实现从服务器到存储设备路径完全冗余,数据链路的高品质性能保障;其次,在保证物理链路连通的同时通过存储链路冗余软件来保证逻辑的冗余性;第三,在基于FC SAN存储的guest os(客户应用)可通过云计算平台架构实现HA(Fail Over),DRS(Distributed Resource Scheduler)和vmotion(Live Migration)功能来保证业务的可连续性和可扩展性。在保障了客户应用的情况下,我们可以注意到存储成为一个核心的关键点,如果存储出现问题也将导致整体业务的不可运行,为此我们在存储的选择上双控制器,多处理器,高可靠光纤8Gb存储成为首选。基于此我们对业务的物理特性有了保障。处于对于客户业务系统的安全性考虑,建议对所有客户应用数据做统一备份处理。

在数据的统一备份处理上,基于我们的虚拟机文件驻留在共享SAN存储上,可以使用存储区的映像来备份虚拟机文件,这样做不会在运行虚拟机的云计算计算节点主机上引起任何额外的负载。而统一备份功能可以满足缩短虚拟机的备份时间,移除客户应用服务器上的备份工作负载,以及从中央服务器中执行备份的工作。而统一备份工作流程是从运作中的主机剥离磁盘,将磁盘链接到专用的统一备份服务器上,然后备份磁盘中适当的文件,只不过原始主机仍能看到该磁盘并能正常工作。通过此方法可以对整个虚拟机可封装在一组离散文件中特性加以更好利用;同时我们原有的IPSAN存储也得到很好的使用,保障客户的投资是健康有益的。

光纤FC-SAN优

一般来说IP-SAN存储设备的磁盘控制器不是采用FC-SAN存储设备中的硬件RAID芯片+中央处理器的结构,而是采用每个磁盘柜中分为多个磁盘组,而每个磁盘组由一个微处理芯片控制所有的磁盘RAID操作(采用软件计算,效率较低)和RAID组的管理操作。这样一来,每一次磁盘I/O操作都将经过IP-SAN

存储内置的一个类似交换机的设备从前端众多的主机端口中读取或者写入数据,而这些操作都是基于IP交换协议,其协议本身就要求每一个微处理芯片工作时需要大容量的缓存来支持数据包队列的排队操作,所以一般我们看到的IP-SAN存储都具有几十个GB的缓存。利用这个大的缓存区,IP-SAN存储在测试Cache 的最大读带宽时可以获得600,000IOPS甚至以上这样高的值,但是这个值并不能真正说明在实际应用中就能够获得好的性能。因为在具有海量存储的时候,不可能所有的数据均载入到系统缓存中,这个时候就需要大量的磁盘I/O操作来查找数据,而IP-SAN存储所采用的SATA磁盘在这一块切切性能非常弱,而且还涉及到一个在IP网络上流动的iSCSI数据向ATA格式数据转化的效率损失问题。也就是说IP-SAN存储存在一个缓存Cache到磁盘的数据I/O和数据处理瓶颈。而采用FC磁盘的FC-SAN存储设备就不存在这样的问题。通过2条甚至4条冗余的后端光纤磁盘通道,可以获得一个非常高的磁盘读写带宽,而且FC的磁盘读写协议不存在一个数据格式转换的问题,因为他们内部采用的都是SCSI协议传输,避免了效率的损失。而且FC-SAN存储设备由于光纤交换和数据传输的高效性,并不需要很大的缓存就能够获得一个好的数据命中率和读写性能,一般2Gb或者4Gb即可满足要求。另外由于具备专门的硬件RAID校验控制芯片,所以磁盘RAID性能将比软件RAID性能好很多,并且可靠性更好。

从连接拓扑结构来看

在FC-SAN 中存在着其灵活的连接方式,可根据不通的应用需求而选择不同的连接拓扑,其主要连接方式有如下三种:

点对点:首先各个组成设备通过登陆建立初始连接,然后即采用全带宽进行工作,其实际的链路利用率为每个终端的光纤通道控制器以及发送与接收数据可获得缓冲区大小来决定。但其只适用于小规模存储设备的方案,不具备共享功能。

仲裁环:允许两台以上的设备通过一个共享带宽进行通信与交流,在此拓扑结构中,任意一个进程的创建者在发送一段报文之前,都将首先与传输介质就如何存取信息达成协议,因此所有设备均能通过仲裁协议实现对通信介质的有序访问。

全交换:通过链路层交换提供及时、多路的点对点的连接。通过专用、高性能的光纤通道交换机进行连接,同时可进行多对设备之间点对点的通信,从而使整个系统的总带宽随设备的增多而相应增大,在增多的同时丝毫不影响这个系统的性能。

在IP-SAN 中基于以太网的数据传输与存取中,虽然在物理上可体现为总线或者星型连接,但其实质为带冲突检测多路载波侦听(CSMA/CD)方式进行广播式数据传输的总线拓扑,因此随着负载以及网络中通信客户端的增加,其实际效率会随着相应的降低。

从网络设备及传输介质来看

FC-SAN:使用专用光纤通道设备在链路中使用光纤介质,不仅完全可以避免因传输过程中各种电磁干扰,而且可以有效达到远距离的I/O通道连接

在FC-SAN 中所使用的核心交换设备-光纤交换机均带具有高可靠性及高性能的ASIC芯片设计,使整个处理过程完全基于硬件级别的高效处理。

同样在连接至主机的HBA设计中,绝大多数操作独立处理,完全不耗费主机处理资源。

IP-SAN:使用通用的IP网络及设备

在传输介质中使用铜缆、双绞线、光纤等介质进行信号的传输,但在普通的廉价介质存在信号衰减严重等缺点,而使用光纤也同样需要特有的光电转换设备等。在IP网络中,可借助IP路由器进行传输,但根据其距离远近,会产生相应的传输延迟。

核心使用各种性能的网络交换机,受传输协议本身的限制,其实际处理效率不高。

在主机端通常使用廉价的各种速率的网卡,大量耗费主机的应用处理资源。可得出如下光纤通道(FC)与网络(IP)的对比表,该对比表可清晰表明使用光纤通道进行大数据量的信息存储传输与处理中在其性能有着网络在现阶段无法比拟的优势。

在链路中使用光纤介质,不仅完全可以避免因传输过程中各种电磁干扰,而且可以有效达到远距离的I/O通道连接

在FC-SAN 中所使用的核心交换设备-光纤交换机均带具有高可靠性及高性能的ASIC芯片设计,使整个处理过程完全基于硬件级别的高效处理。

同样在连接至主机的HBA设计中,绝大多数操作独立处理,完全不耗费主机处理资源。

IP-SAN:使用通用的IP网络及设备

在传输介质中使用铜缆、双绞线、光纤等介质进行信号的传输,但在普通的廉价介质存在信号衰减严重等缺点,而使用光纤也同样需要特有的光电转换设备等。在IP网络中,可借助IP路由器进行传输,但根据其距离远近,会产生相应的传输延迟。

核心使用各种性能的网络交换机,受传输协议本身的限制,其实际处理效率不高。在主机端通常使用廉价的各种速率的网卡,大量耗费主机的应用处理资源。可得出如下光纤通道(FC)与网络(IP)的对比表,该对比表可清晰表明使用光纤通道进行大数据量的信息存储传输与处理中在其性能有着网络在现阶段无法比拟的优势。

从存储能够响应的并发操作能力来看

从应用上来说,相对于IP-SAN,FC-SAN可以承接更多的并发访问用户数。当并发访问Storage的用户数不多的情况时,FC-SAN对比IP-SAN二者性能相差无几。但一旦当外接用户数呈大规模增长趋势时,FC-SAN就显示出其在稳定、安全、以及高性能传输率等方面的优势,不会像IP-SAN由于自身传输带宽的瓶颈而导致整个系统的被拖垮。面对大规模并发访问,无论是从外接用户数规模来说还是从传输性能和稳定性来说,FC-SAN都有着IP-SAN不可比拟的优势。

存储区域网中设备稳定性比较

FC-SAN 由于使用高效的光纤通道协议,因此大部分功能都基于硬件来实现的,如后端存储子系统的存储虚拟通过带有高性能处理器的专用RAID 控制器来实现,中间的数据交换层通过专用的高性能ASIC来进行基于硬件级的交换处理,在主机端通过带有ASIC 芯片的专用HBA 来进行数据信息的处理。因此在大量减少主机处理开销的同时,也大大提高了整个FC-SAN的稳定性

IP-SAN 使用通用的IP 协议,而所有的协议转换及处理时,绝大部分依赖于软件来实现,而软件的不稳定性因素也随软件的复杂度的增加而呈指数级增加,从而在大型的网络中,整个系统的稳定性也会随之降低。

存储区域网的可扩展性比较

在全交换(FC-SW Fibre Channel switch fabric)的FC-SAN 中,各通信终端通过FC端口登陆后来进行数据的传输与处理,而每个端口会提供专用的24位的FC端口地址(WWN)来进行数据通信,根据其地址分配策略,在FC-SW中实FC-SAN与IP-SAN比较际可用的地址值达到1550 万,因此在实际的企业级应用中,完全可以满足任何规模的存储网络的建立。

同时在FC 网络中,由于所有的介质均选用光媒质来进行传输,所以其设备均具有热插拔的能力,因此不管在已有的或者新建立的FC-SAN 网络里可在线完全非中断应用的情况下对现有的FC-SAN 网络进行扩展,如增加新的服务器、增加新的存储空间等等,并且完全不影响已有系统的性能。

在IP-SAN中由于借助原有的IP网络,因此在其网络连接拓扑也同样具有好的可扩展性。但在使用IP 存储时,由于通常使用了专有的存储虚拟软件,所有的存储分配与虚拟均通过软件来实现,所以在进行存储的扩展时,很大程度取决于存储虚拟软件的设计性能以及架构等等。存储区域网的可靠性比较

FC-SAN的设计初衷是基于企业级的核心数据以及应用而设计的,因此在其兴起、发展直至成熟,对整个系统的可靠性均有着很高的要求。在整个系统中,除了本身系统即基于高靠的环境中外,所有设备均采用高可靠性的硬件及芯片来设计,并且系统的核心部件以及相关的所有链路等均可采用热插拔双冗余的设计,如存储子系统的冗余控制器、冗余电源等;链路可采用多路径冗余或者负载均衡等等。另大部分设计是基于硬件的,所以方便使用高可靠、高性能的嵌入式系统来进行数据的处理。

IP-SAN 本身即基于不可靠的IP 网络,因此其可靠性必须在已有的软件中增加其可靠性的设计,如增加冗余的功能、提供HA 模式等等。因为是基于软件设计的,因此在功能上会有所丰富的表现,但其可靠性也同样是基于软件的复杂度的增加而降低,同时也可能会引起性能下降的副作用。

存储区域网的可管理性比较

FC-SAN本身即一个开放式的独立系统,并存储和处理企业核心的数据信息,因此对其有和良好的管理与监控也至关重要。在FC-SAN 的发展与成熟过程中,无论就其系统的某个单独的子系统还是整个FC-SAN 系统都与产生了相应丰富的管理与监控软件。它们可以提供各种方式的连接,如WEB、RS-232等;各种管理界面,如字符界面、命令行界面、GUI图形界面等;各种集中或独立的灵活管理方式,如C/S方式的集中管理、直接本地LED或者远程WEB单独监控、整个存储子系统设备的集中管理与配置或单个模块的特定监控等等。IP-SAN 基于IP 网络的设计,其本身很大一部分也是基于软件实现的,因此就其管理性而言,由于可在已有的平台或软件中嵌套、重新设计新的管理模块,所以也提供了丰富的管理功能及方式,因此也同样有着好的可管理性。

综上所述,更稳定,更成熟,更好的开放性,以及更高的安全性是FC-SAN相对于万兆IP-SAN的优势。虽然FC-SAN在单路带宽上相对万兆IP-SAN有不足,但是即使在高端应用上,应用“双路聚合技术”后的8GB带宽也完全能满足应用的需求,同时高端应用多数是要求高IOPS,而IP协议本身特点以及高开销直接影响了其IOPS的提升。

第五篇:河南师范大学全校应用系统数据存储及备份方案.

河南师范大学全校应用系统数据存储及备份方案 用户概况 设计要求 方案描述

一,用户概况

河南师范大学是一所建校历史较长的省属重点大学。学校北依巍巍太行,南滨滚滚黄河,位于京广、太荷 铁路交汇处的豫北名城新乡市,坐落在广袤的牧野大地、美丽的卫水之滨。其前身是始建于 1923年的中 州大学和创建于 1951年的平原师范学院。新中国成立后,由于院系调整,学校先后更名为河南师范学院 二院、河南第二师范学院、新乡师范学院。1985年始称河南师范大学。

二,设计要求

河南师范大学现有的应用及大致需求如下: 1.老校区所有应用系统共十几个,将所有的数据集中存储备份在存储数据中心。

2.老校区需要全 SAS 高速存储系统支持。3.老校区所有数据需要在本地做全部同步式备份。4.在另一新校区中建立老校区数据中心的灾难备份中心。

5.据初步统计,众多应用系统中共有 oracle 服务器 x 台, sql 服务器 y 台, linux 服务器 z 台(用户数

据保密。

6.据初步统计, 大约有 m 台重要服务器需要做 P2V 备份方案, 并要求灾难发生时能快速 V2P 恢复(用

户数据保密。

7.老校区本地数据备份到本地另一存储空间, 有部分数据需要实现 CDP 级别备份, 剩下所有实现基

于时间策略的增量备份即可。三,方案描述

本方案设计本着最大化存储利用率、对数据分重要性程度进行设计的原则,对前端各大应用系统服务器及 其数据进行分类,大约 10TB 数据进入上图中 “ 老校区主存储中心 ” ,该存储中心配置考虑: 1.基于数据重要性和数据量考虑,配置基于 SAS 和 SATA 混合的网络存储系统。

2.对重要性高的数据和读写性能要求高的数据存入 SAS 硬盘阵列中, 对于其余数据则存入 SATA 硬 盘阵列中,最大化提升数据中心的性价比。

3.配备两台 12盘位 NAS+IPSAN统一网络存储 ReadyNAS 3200, 每台配置 8块 600GB SAS硬盘。

对大学内视频及其相关应用的数据大约有 50TB 数据量, 则考虑存入 “ 老校区视频及相关应用主存储 ” , 该存 储中心配置考虑: 1.视频及相关应用数据量庞大,安全性要求相对低一些,配置基于纯 SATA 的网络存储系统。

2.目前, NETGEAR 的 ReadyNAS 统一网络存储提供全球领先的全速企业级 2TB SATA配置, 可以 最大程度保证视频及应用数据的大量高速存储。

3.配置两台 12盘位 NAS+IPSAN统一网络存储 ReadyNAS 3200,每台配置 12块 2TB SATAII全 速企业级硬盘。

另外, 考虑到主存储数据的安全性, 需要在本地近线备份所有重要数据, 建议设计 “ 老校区主存储备份中心 ” , 将主存储中心的 10TB 数据近线备份到此,相关考虑如下: 1.基于主存储数据的安全性和增长性考虑,建议在主存储备份中心配置基于 SATA 高性价比网络存 储。

2.考虑到主存储数据近线备份的多副本保存, 建议在主存储备份中心配置两倍于主存储中心的容量。

3.配置两台 12盘位 NAS+IPSAN统一网络存储 ReadyNAS 3200,每台配置 12块 1TB SATAII全 速企业级硬盘。

考虑到老校区重要数据的安全性,除了在本地做近线备份之外,建议在新校区建议远程的灾备中心,以确 保当老校区主存储数据中心发生不可预知的灾难时,可以借

助新校区灾备中心的备份数据及时恢复所有学 校的重要业务及数据,灾备中心建设考虑如下: 1.基于老校区主存储备份数据量的考虑, 建议在新校区建立的灾备中心在两倍容量与原数据量大小。

2.考虑到数据量很大,建议老校区到新校区数据备份线路采用千兆光纤,并结合文件及数据块增量 备份策略一起保证数据灾备的成功率。

3.配置两台 12盘位 NAS+IPSAN统一网络存储 ReadyNAS 3200,每台配置 12块 2TB SATAII全 速企业级硬盘。

在各应用系统服务器数据保护方案建设中, 建议配置与 NETGEAR 有紧密合作的 Symantec 备份恢复解决 方案 Bcakup EXEC, 在该校园数据中心备份方案中, 考虑 oracel 数据库服务器和 sql 数据库服务器及文件 被打开执行备份的成功率,主要配置有如下组件: 1.Windows 系统主备份服务器 2.Oracle 数据库备份 Agent 3.SQL 数据库备份 Agent 4.打开文件备份功能选件

在各项 Symantec BE备份功能与 RALUS for ReadyNAS配合工作下,可以实现下图描述的服务器系统数 据备份流程: 另外,考虑到部分重要服务器在灾难发生时的恢复问题,建议配置 NETGEAR 全球领先的 P2V 及 V2P 备 份恢复解决方案,该方案结合 VMware ESX(i可以对重要服务器实现以下全球领先的方案: 裸机恢复解决方案

传统的备份机制大都是以数据保护为核心,而忽略了系统及生产服务的保护,当系统发生灾难时,您必须 准备好所有的系统设置信息,并且耗费时间重新安装及设定系统,然后才能进行数据的恢复,最后生产才 有可能正常运行。

实际上我们需要保护的数据有下图所示的各种类型 : 我们创新的裸机恢复解决方案以快速恢复业务生产为前提, 完整保护系统及业务数据, 在系统发生灾难时, 依据独创的 iSCSI 远程启动技术,可以将系统及业务直接在 ReadyAS 存储设备上运行,然后可以在业务 运行的情况下将 ReadyNAS 设备备份的系统及业务数据恢复到原业务主机上。

另外,如果原生产主机设备根本就无法开机了,仍然可以采用最新的 P2V(物理机到虚拟机转换将备份 在 ReadyNAS 存储设备的系统及业务数据直接转换为虚拟机平台可以启动的整体数据, 保证系统在虚拟机 上启动系统并运行业务,如下图所示三种情况下,系统及业务的快速恢复方案。

NETGEAR 裸机恢复解决方案优势: 1.提供系统、应用及数据保护于一体 2.提供一个基于主机的数据复制方案 3.采用文件数据的完整性和一致性传输的方式 4.针对卷进行复制备份

5.基于 SAN 架构,提供 LAN-free 备份模式

6.充分结合 Microsoft VSS和专业数据库代理,保证文件系统和数据库安全备份 7.创新的基于 P2V 虚拟机启动和 iSCSI 远程启动方案

8.ReadyNAS 存储完美支持 VMWARE 虚拟化认证 N+1容灾备份解决方案

在如今的网络环境中,大都会有多种类型的服务器存在,提供不同类型的服务,这些服务器的业务都需要 实施数据保护措施,而意外的情况永远都无法预料,有可能是硬盘损坏,也可能是硬件主板损坏、也可能 是人为操作失误或病毒破坏等、也可能一台服务器出故障、也可能是多台服务器同时出故障。针对这些难 以预料的意外情况,是否有最为简单的容灾方案呢? NETGEAR 推出最新的 N+1容灾备份解决方案, 不论出现上述哪种意外情况, 也不论有几台设备同时出现 故障, 都可以通过事先部署的一台容灾服务器从 ReadyNAS 存储设备上将备份的数据启动起来, 以最短的 时间保证业务正常运行。

NETGEAR N+1容灾备份解决方案优势: 1.服务器主机系统及业务数据整机 CDP 备份到 ReadyNAS 存储设备 2.基于数据块的差异备份,确保快速保证数据变化的一致性 3.容灾服务器上部署 VMWARE ESX(I平台

4.发生灾难时,快速将备份在 ReadyNAS 上的数据通过 P2V 转换为容灾服务器可用数据系统及业 务数据的恢复可通过 V2P 在线实现

虚拟化远程容灾解决方案

对于校园数据网络的业务系统容灾光有本地的 N+1有时还不够安全, 有一些由不可抗力因素造成的业务系 统瘫痪可能会导致本地整个机房都无法运行,势必需要在远程异地构建一个容灾中心,在关键时候将关键 业务数据及系统进行接管。通常该需求会受到两个方面的限制:数据量大和网络带宽窄。

NETGEAR 远程容灾解决方案采用创新的 CDP、P2V、块差异备份、数据高压缩及 UDP 优化处理等技术, 保证远程容灾实现的快速安全,并且业务的接管可以通过异地虚拟机来实现。

NETGEAR 虚拟化远程容灾解决方案优势: 1.利用本地 CDP 和在线 P2V(真实机到虚拟机转换技术,虚拟化容灾解决方案把本地服务器的 运行环境(系统、应用、数据和系统配置等复制到容灾中心。

2.基于磁盘块差异备份技术,保证传输的数据量尽可能少 3.远程容灾中心的所有业务接管都是采用虚拟机来实现 4.在 WAN 中传输最高压缩比可达 4:1,并通过 UDP 优化处理 CDP 连续数据保护方案

CDP(Continuous Data Protection即连续数据保护方案,可在数据发生任何变化时将数据有效地保护起 来, CDP 技术将过去只有一次数据镜像、备份或副本的数据保护技术,演进为最新的可以有很多个数据镜 像、备份或副本的数据保护技术。该技术方案可以保护不同历史时间点的数据副本,而且在原始数据损坏 或丢失时,可以在最短时间内进行任意时间点的数据恢复。

NETGEAR CDP连续数据保护方案不仅涵盖了各类灾难保护(包括人为故障、病毒、软件故障、硬件故障 等灾难,而且能够针对不同主机服务器、数据库、存储的环境提供全面的数据保护, CDP 连续数据保护 方案可以将 RPO(恢复点目标和 RTO(恢复时间目标降到最低。

NETGEAR CDP连续数据保护方案优势: 1.基于 SAN 网络的文件级别的备份

2.基于数据块的差异备份,确保快速保证数据变化的一致性 3.配合数据库代理,确保数据库数据实时备份

4.通过网络中 CDP 管理服务器管理不同时间点的副本

综上方案描述,从主存储中心、近线备份、远程灾备、数据库服务器备份以及 P2V 和 V2P 备份恢复方案 的各项建议,为河南师范大学数据中心和灾备中心的建设提供了最为全面的方案建议。

方案优势

NETGEAR 领先的存储品牌 ReadyNAS ,以创新的技术和产品 ReadyNAS 3200交付用户使用,并且配合 一系列增值的解决方案,为用户打造最有竞争力的、具有投资保护价值的整体数据存储和保护的方案。

1.最佳性价比的本地、近线和远程灾备整体解决方案

2.内置 Symantec BE的 agent ,业界最好的数据备份整合方案 3.业界最优的裸机恢复方案 4.业界性价比最高的 CDP 方案

下载非结构化存储数据方案之一[优秀范文5篇]word格式文档
下载非结构化存储数据方案之一[优秀范文5篇].doc
将本文档下载到自己电脑,方便修改和收藏,请勿使用迅雷等下载。
点此处下载文档

文档为doc格式


声明:本文内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:645879355@qq.com 进行举报,并提供相关证据,工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。

相关范文推荐

    非结构化大数据在互联网 时代的应用思考-演讲初稿(文案)

    非结构化大数据在互联网+时代的应用思考 尊敬的主持人,各位嘉宾,各位同仁: 标题页 互联网+时代改变了我们的生活,也为非结构化大数据管理注入了新的内涵。作为多年来专注于此领......

    黑马程序员:IOS面试宝典数据存储5篇

    数据存储(★★) 1、 IOS中常用的数据存储方式有哪些? 答:1.数据存储有四种方案,NSUserDefault,KeyChain,File,DB. 2.其中File有三种方式:plist,Archiver,Stream 3.DB包括core Data......

    国外海量数据离线存储产品应用[最终定稿]

    国外海量数据离线存储产品应用 在当先信息技术高速发展的情况下,不同类型的信息、数据爆发式的产生。同时,当今社会及经济发展中需要将从前工作、生活、经济活动所产生的非数......

    开发区中小企业数据存储需求调查问卷(范文)

    开发区中小企业数据存储需求调查问卷尊敬的领导、先生、女士:您好! 感谢您阅读这份调查问卷。此次调查是开发区管委会为落实国家和北京市“两化融合”精神,专门为了解中小企业......

    涉密和非涉密移动存储介质保密管理制度

    滨海新区规划和国土资源管理局关于涉密和非涉密移 第一条 第二条 第三条 第四条 第五条 第六条 第七条 第八条 动存储介质保密管理制度(暂行)为贯彻执行《中华人民共和国保守......

    涉密和非涉密移动存储介质保密管理制度

    某某县国土资源局 涉密和非涉密移动存储介质保密管理制度第一条 为进一步加强我局涉密和非涉密移动存储介质保密管理工作,确保国家秘密的安全,根据《保守国家秘密法》有关规定......

    涉密和非涉密移动存储介质保密管理制度

    西安市勘察测绘院 涉密和非涉密移动存储介质保密管理制度 为进一步加强我院移动存储介质的管理,确保测绘信息的安全,根据《中华人民共和国保守国家秘密法》和《中共中央保密委......

    SAN存储交换机改造方案

    SAN存储交换机改造方案 在现实环境中服务器与存储搭建san环境时,为了达到链路的冗余,防止单点故障,一般都需要引进光纤交换机 。同时当业务系统不断增加,光纤交换机端口无法满足......