数据存储与备份技术.ppt

《数据存储与备份技术.ppt》由会员分享，可在线阅读，更多相关《数据存储与备份技术.ppt（132页珍藏版）》请在三一办公上搜索。

1、数据存储与备份技术,闪存直接外挂存储（DAS）存储域网络（SAN）网络附加存储设备（NAS）存储技术发展数据备份,一、闪存,闪存是内存的一种，闪存卡（Flash Card）是利用闪存（Flash Memory）技术达到存储电子信息的存储器，一般应用在数码相机，掌上电脑，MP3等小型数码产品中作为存储介质，所以样子小巧，有如一张卡片，所以称之为闪存卡。根据不同的生产厂商和不同的应用，闪存卡大概有：SmartMedia（SM卡）、Compact Flash（CF卡）、MultiMediaCard（MMC卡）、Secure Digital（SD卡）、Memory Stick（记忆棒）、XD-Pict

2、ure Card（XD卡）和微硬盘（MICRODRIVE）。,CF(CompactFlash)卡,Compact Flash的诞生比较早，由最大的Flash Memory卡厂商之一美国SanDisk于1994年首次推出。意为“标准闪存卡”，简称“CF卡”。,CF(CompactFlash)卡,CF卡与其它存储卡相比，有几个特点。CF卡 使用flash作为存储媒介，无需供电也能保存资料，而且工作时耗电量也很低，它在3.3V或者5V的电压下工作，其耗电量只相当于传统存储设备如磁带、硬盘的3%或更低，适合用在移动设备上；如上图，CF卡由两个基本部分组成：控制芯片和闪存模组，闪存用于存储信息，控制芯片

3、用来实现与主机的连接及控制数据在闪存模块中的传输。,CF(CompactFlash)卡,CF卡比闪盘之类的存储器更加接近硬盘，CF卡内部控制器设计完全模拟硬盘，而且使用标准的ATA/IDE接口界面，可以很容易的通过IDE接口与电脑连接，而且早已实现无驱动设计，使用非常方便。CF卡最初一般是配备PCMCIA适配器在笔记本电脑的PCMCIA插槽上使用，现在还有了许多USB、IEEE1394读卡器等各种各样的CF适配器，使CF卡与电脑之间的信息传输变得更加方便。,SM(Smart Media)卡,SmartMedia是由东芝公司Toshiba America Electronic Component

4、s（TAEC）在1995年11月发布的Flash Memory存贮卡，三星公司Samsung Electronic Co.在1996年购买了生产和销售许可，这两家公司成为主要的SmartMedia厂商。SmartMedia采用了东芝大力鼓吹的NAND型Flash Memory，因此体积做得很小：45mm x 37mm x 0.76mm，非常的薄，仅重1.8克。NAND型Flash Memory的功劳还使得SmartMedia具有比较高的擦写性能，成为除了薄以外的另一个特点。,SM(Smart Media)卡,SmartMedia为了节省自身的成本，存贮卡上只有Flash Memory模块和接口

5、，而并没有包括控制芯片，所以使用SmartMedia的设备必须自己装置控制机构。但这却带来了令人头疼的兼容性问题：由于各家的控制不尽相同，所以存在着格式互不兼容的现象，如一张SmartMedia在某个MP3播放器上用了，往往就不能直接在数码相机上使用。另外旧的设备是根据以前的SmartMedia规范来设计的，所以当SmartMedia推出新的升级产品时，规范往往会改变，以前的设备很多就无法使用。例如推出新容量SmartMedia时，页/块大小和其它一些东西都改变了，结果新容量的SmartMedia无法在很多旧的设备上使用，造成不少浪费。接口方面，SmartMedia采用了22针的接口，我们在卡

6、上看到的是遍平的金手指。,SIM卡 是（Subscriber Identity Model 客户识别模块）的缩写，也称为智能卡、用户身份识别卡,GSM数字移动电话机必须装上此卡方能使用。,SIM卡是带有微处理器的智能芯片卡，它的构成是以下几个模块：-CPU-程序存储器(ROM)-工作存储器(RAM)-数据存储器(EPROM或E2PROM)-串行通信单元 这五个模块必须集成在一块集成电路中，否则其安全性会受到威胁。因为，芯片间的连线可能成为非法存取和盗用SIM卡的重要线索。,在实际使用中有两种功能相同而形式不同的SIM卡：(a)卡片式(俗称大卡)SIM卡，这种形式的SIM卡符合有关IC卡的ISO

7、7816标准，类似IC卡。(b)嵌入式(俗称小卡)SIM卡，其大小只有25mm15mm，是半永久性地装入到移动台设备中的卡。两种卡外装都有防水、耐磨、抗静电、接触可靠和精度高的特点。,SIM卡中存储了数字移动电话客户的信息、加密密钥等内容，它可供GSM网络对客户身份进行鉴别，并对客户通话时的语音信息进行加密。SIM卡的使用，完全防止了并机和通话被窃听行为，并且 SIM卡的制作是严格按照GSM国际标准和规范来完成的，它使客户的正常通信得到了可靠的保障。SIM卡在GSM系统中的应用，使得卡和手机分离，一张SIM卡唯一标识一个客户。一张SIM卡可以插入任何一部GSM手机中使用，而使用手机所产生的通信

8、费用则自动记录在该SIM卡所唯一标识的客户的帐户上。,MMC(MultiMediaCard)卡,MMC即MultiMediaCard，由西门子公司Siemens（现在称为Infineon）和首推CF的SanDisk于1997年推出。1998年1月十四家公司联合成立了MMC协会（MultiMediaCard Association简称MMCA），现在已经有超过84个成员，其中更包括了Nokia、Ericsson、Motorola等手机巨头。,MMC(MultiMediaCard)卡,MMC的发展目标主要是针对数码影像、音乐、手机、PDA、电子书、玩具等产品，号称是目前世界上最小的Flash Me

9、mory存贮卡，尺寸只有32mm x 24mm x 1.4mm。虽然比SmartMedia厚，但整体体积却比SmartMedia小，而且也比SmartMedia轻，只有1.5克。MMC存贮卡可以分为MMC和SPI两种工作模式，MMC模式是标准的默认模式，具有MMC的全部特性。而SPI模式则是MMC存贮卡可选的第二种模式，这个模式是MMC协议的一个子集，主要用于只需要小数量的卡（通常是1个）和低数据传输率（和MMC协议相比）的系统，这个模式可以把设计花费减到最小，但性能就不如MMC。MMC被设计作为一种低成本的数据平台和通讯介质，它的接口设计非常简单：只有7针！接口成本低于0.5美元，相比之下S

10、martMedia和Memory Stick的接口成本都要高于1美元。在接口中，电源供应是3针，而数据操作只用3针的串行总线就搞定了（SPI模式再加上1针用于选择芯片），真是简单得不能再简单了。,SD(Secure Digital Card)卡,SD卡可以说是相当新的产品，SD的意思是Secure Digital。这个产品由松下电器Matsusa Electric Industrial Co.,Ltd、东芝Toshiba Corp.和SanDisk联合推出，1999年8月才首次发布。SD卡数据传送和物理规范由MMC发展而来，大小和MMC差不多，尺寸为32mm x 24mm x 2.1mm。长宽

11、和MMC一样，只是厚了0.7mm，以容纳更大容量的存贮单元。,SD(Secure Digital Card)卡,SD卡与MMC卡保持着向上兼容，也就是说，MMC可以被新的SD设备存取，兼容性则取决于应用软件，但SD卡却不可以被MMC设备存取。（SD卡外型采用了与MMC厚度一样的导轨式设计，以使SD设备可以适合MMC）SD接口除了保留MMC的7针外，还在两边加多了2针，作为数据线。至于在存贮单元方面，当然也是采用了东芝大力倡导的NAND型Flash Memory，基本上和SmartMedia的一样，所以性能也不俗，平均数据传输率能达到2MB/s，不久更将提高到10MB/s。也许是被SmartMe

12、dia不兼容性弄怕了，这次SD把控制器集成到了卡里，希望在推出新规格的SD卡时，不会再有不兼容的情况发生了。另外SD和Memory Stick一样，也带了物理写保护开关。,Memory Stick记忆棒,Memory Stick被很多人称为香口胶存贮卡，因为其尺寸确实像一条香口胶：50mm x 21.5mm x 0.28mm，重4克。采用精致醒目的蓝色外壳（新的MG为白色），并具有写保护开关。Memory Stick由Sony在日本的工厂生产，但存贮单元模块却并不是由Sony自己生产的，而是由第三方厂商提供。,Memory Stick记忆棒,和很多Flash Memory存贮卡不同，Memor

13、y Stick规范是非公开的，没有什么标准化组织（Sony认为没有必要进行行业标准化）。这个香口胶采用了Sony自己的外型、协议、物理格式和版权保护技术，要使用它的规范就必须和Sony谈判签定许可。目前所知道的是Memory Stick也包括了控制器在内，采用10针接口，数据总线为串行，最高频率可达20MHz，电压为2.7伏到3.6伏，电流平均为45mA。可以看出这个规格和差不多同一时间出现的MMC颇为相似。,XD卡,XD卡全称为XD-PICTURE CARD，是由富士和奥林巴斯联合推出的专为数码相机使用的小型存储卡，采用单面18针接口，是目前体积最小的存储卡。XD取自于“Extreme Di

14、gital”，是“极限数字”的意思。,XD卡,XD卡是较为新型的闪存卡，相比于其它闪存卡，它拥有众多的优势特点。袖珍的外形尺寸，外形尺寸为20mm25mm1.7mm，总体积只有0.85立方厘米，约为2克重，是目前世界上最为轻便、体积最小的数字闪存卡。优秀的兼容性，配合各式的读卡器，可以方便的与个人电脑连接。超大的存储容量，XD卡的理论最大容量可达8GB，具有很大的扩展空间。目前市场上见到的XD卡有16MB、32MB、64MB、128MB、256MB等不同的容量规格。,微硬盘（Microdrive）,微硬盘（Microdrive）最早是由IBM公司开发的一款超级迷你硬盘机产品。其最初的容量为34

15、0MB和512MB，而现在的产品容量有1GB、2GB以及4GB等。与以前相比，目前的微硬盘降低了转速（4200rpm降为3600rpm），从而降低了功耗，但增强了稳定性。,微硬盘（Microdrive）,可以使用CF卡的大多数设备大都可以直接使用Microdrive，如数码相机、手持电脑、MP3播放器等。笔记本电脑则通过PCMCIA适配器转接，由于Microdrive比起CF卡略厚，所以需要设备符合CFII标准，大容量的Microdrive(4GB)要求设备支持FAT32文件系统。与CF相比，Microdrive的最大优势是单位存储容量的价格更低。Microdrive采用的是硬盘技术，具有低成

16、本高容量的特点，可以成为采用固态存储技术存贮器的替代品。目前柯达、三洋、富士通、爱普生等公司，已经开始设计支持Microdrive使用的数码相机产品。未来可以预见的是，包括数码相机或其它计算机外设产品，会陆续加入支持Microdrive的行列。,Information Infrastructure,Topology Summary,二、数据存储,直接外挂存储（DAS）,DAS（Direct Attached Storage直接连接存储）是指将存储设备通过SCSI接口或光纤通道直接连接到一台计算机上。DAS的适用环境为：1）服务器在地理分布上很分散，通过SAN或NAS在它们之间进行互连非常困难时

17、(商店或银行的分支便是一个典型的例子)；2）存储系统必须被直接连接到应用服务器（如Microsoft Cluster Server或某些数据库使用的“原始分区”）上时；3）包括许多数据库应用和应用服务器在内的应用，它们需要直接连接到存储器上，群件应用和一些邮件服务也包括在内。当服务器在地理上比较分散，很难通过远程连接进行互连时，直接连接存储是比较好的解决方案，甚至可能是唯一的解决方案。利用直接连接存储的另一个原因也可能是企业决定继续保留已有的传输速率并不很高的网络系统。,存储域网络（SAN）,存储域网络（Storage Area Network）的支撑技术是Fibre Channel(FC)技

18、术，这是ANSI为网络和通道IO接口建立的一个标准集成。支持HIPPI，IPI，SCSI，IP，ATM等多种高级协议，它的最大特性是将网络和设备的通讯协议与传输物理介质隔离开这样多种协议可在同一个物理连接上同时传送，高性能存储体和宽带网络使用单I/O接口使得系统的成本和复杂程度大大降低。如通过Switch扩充至交换仲裁复用结构则可将用户扩至很多。FC使用全双工串行通讯原理传输数据，传输速率高达1062.5Mbps，Fibre Channel的数据传输速度为100MBS，双环可达200MBS，使用同轴线传输距离为30米，使用单模光纤传输距离可达10公里以上。光纤通道支持多种拓扑结构，主要有：点到

19、点（Links）、仲裁环（FC-AL）、交换式网络结构（FC-XS）。点对点方式的例子是一台主机与一台磁盘阵列透过光纤通道连接；其次为光纤通道仲裁环(FC-AL)，在FC-AL的装置可为主机或存储装置。第三种FC-XS交换式架构在主机和存储装置之间透过智能型的光纤通道交换器连接，使用交换架构需使用存储网络的管理软件。,Finance,Sales,Network Clients,Oracle,Exchange,SAP,EMC Networked Storage SAN,Midrange Networked Storage Architecture,Finance,Sales,Network Cl

20、ients,Oracle,Exchange,SAP,File Servers,CLARiiON IP4700 NAS,File Servers,Celerra NAS,High End Networked Storage Architecture,EMC Connectrix Family(SAN),Hubs,SwitchesHigh availabilityDepartmental and data center locationsRack mountable,DirectorsRedundant everythingNon-blocking I/OData center locations

21、Maximum scalability,ED-64M,ED-1032,DS-8B,DS-16B,DS-32M,DS-16M,（1）既具有单通道的特点，又具有网络的特点，它是把设备连接到网络结构上的一种高速通道。而这种网络结构描述了连接两套设备的单条电缆以及连接许多设备的交换机产生网状结构。（2）光纤通道最大优点是速度快，它可以给计算机设备提供接近于设备处理速度的吞吐量。（3）协议无关性，它有很好的通用性，是一种通用传输机制。适用范围广，可提供多性价比的系统，从小系统到超大型系统，支持存在的多种指令集，如IP、SCSI、IPI。光纤通道规范定义的速率最高可到4Gbps，目前T11工程组对10Gb

22、ps传输速度的FC规范也在紧锣密鼓的制定之中。,FC技术具有以下优越性,FC是一种分层结构，每个层次定义为一个功能级，但是所分的层不能直接映射到OSI模型的层上。FC通道的五层定义为：物理媒介和传输速率、编码方式、帧协议和流控制、公共服务以及上级协议（ULP）接口。1)FC-0：FC-0是物理层底层标准。FC-0层定义了连接的物理端口特性，包括介质和连接器（驱动器、接收机、发送机等）的物理特性、电气特性和光特性、传输速率以及其它的一些连接端口特性。物理介质有光纤、双绞线和同轴电缆。带有ECL的铜芯同轴电缆，用于高速、短距离传输。双绞线用于25MB/s数据传输，距离可达50米。带有激光和LED传

23、导的光纤，用于长距离的传输，光纤通道的数据误码率低于10E-12，它具有严格的抖动容许规定和串行I/O电路能够进行正常管理的其他一些电气条件。,FC分层结构,2)FC-1（传输协议）FC-1根据ANSI X3 T11标准，规定了8B/10B的编码方式和传输协议，包括串行编码、解码规则、特殊字符和错误控制。传输编码必须是直流平衡以满足接收单元的电气要求。特殊字符确保在串行比特流中出现的是短字符长度和一定的跳变信号，以便时钟恢复。8B/10B码在现实中的应用是稳定和简单的。3)FC-2（帧协议）：FC-2层定义了传输机制、包括帧定位、帧头内容、使用规则以及流量控制等。光纤通道数据帧长度可变，可扩展

24、地址。用于传输数据的光纤通道数据帧长度最多达到2K，因此非常适合于大容量数据的传输。帧头内容包括控制信息、源地址、目的地址、传输序列标识和交换设备等。64字节可选帧头用于其它类型网络在光纤通道上传输时的协议映射。光纤通道依赖数据帧头的内容来引发操作，如把到达的数据发送到一个正确的缓冲区里。,FC分层结构,4)FC-3（公共服务）：提供高级特性的公共服务，即端口间的结构协议和流动控制，它定义了三种服务：条带化（Striping）、搜索组（HuntGroup）和多播（Multicast）。条带化的目的是为了利用多个端口在多个连接上并行传输，这样I/O传输带宽能扩展到相应的倍数。搜索组用于多个端口去

25、响应一个相同名字地址的情况，它通过降低到达占线的端口的概率来提高效率。多播用于将一个信息传递到多个目的地址。5)FC-4（ULP映射）：它是光纤通道标准中定义的最高等级，固定了光纤通道的底层跟高层协议（ULP）之间的映射关系以及与现行标准的应用接口，这里的现行标准包括现有的所有通道标准和网络协议，如SCSI接口和IP、ATM、HIPPI等。,FC分层结构,FC分层结构,SAN 是架构在 Fibre Channel Standard 的储域网络，Fibre Channel 改善了许多SCSI 的限制。,FC与SCSI比较,SAN以数据存储为中心，采用可伸缩的网络拓扑结构，通过具有较高传输速率的光

26、通道连接方式，提供SAN内部任意节点之间的多路可选择的数据交换，并且将数据存储管理集中在相对独立的存储区域网内。SAN的特点是将数据的存储移到了后端，采用了一个专门的系统来完成，并进行了RAID数据保护。,SAN解决方案,a.分享资源存取与设备-Disk and Tape。b.高速度、距离长，可提高资料的可使用率。c.可作 Remote Mirror增加灾难防御力及重建速度。d.透过 SAN 备份，降低经过LAN备份的Traffic负载。e.集中管理与整合储存设备资源。f.FC-Loop 可连接127 个Device，不需要Shutdown Server，即可扩充储存容量，SAN解决方案具备良

27、好扩充性。,SAN的优点,如果储存资料的成长率持续增高，近两年内可能成长至1 TB以上，建议规划 SANReady 的储存设备，包括 RAID 及 Tape Library，因为资料量扩增，必定增加硬盘数量，但 SCSI 的RAID 有 ID 及 Cable 长度的种种限制，在扩充性来说，无法达到需求及稳定度的要求，而且当资料量愈来愈大，可能分享给更多 Client，绝不容许机器有Shutdown的时间，而 SAN Ready 的 RAID 可以让机器在不 Shutdown 的状况下扩充硬盘容量，维持系统不停的正常运作。,什么样的环境需要 SAN?,a.Host Bus Adapter-依连接

28、的作业平台选择 Fibre Channel Card 的种类，装置在主机中，连接 Storage、Fibre Channel Hub 或 Switch。b.Fibre Channel Hub-可将储存设备分享给多台服务器。c.Fibre Channel Switch-如果要将储存设备分享给不同平台的操作系统，或要作SAN 的Security 进阶控管及连接多个 Fibre Channel Hub，须购买此设备及控管软件。d.Fibre Channel Cable 及 GBIC-依主机及储存设备的连接长度选购Cable，Cable 有分 Optical 及 Copper 两种线材，决定使用哪一种

29、 Cable 后再选择 GBIC 的种类，以符合 Cable Connector 的连接型态。e.Fibre Channel/SCSI Conventer-若有些储存设备是 SCSI界面，要连接上 SAN的，则需购买FC/SCSI的讯号转接器。,SAN 的产品组成,SAN 的产品组成,网络附加存储设备（NAS）,网络附加存储设备（Network Attached Storage，NAS）是一种专业的网络文件存储及文件备份设备，或称为网络直联存储设备、网络磁盘阵列。NAS是基于LAN的，按照TCP/IP协议进行通信，面向消息传递，以文件的I/O方式进行数据传输。在LAN环境下，NAS已经完全可以

30、实现异构平台之间的数据级共享，比如NT、UNIX等平台的共享。但是，在10/100M的带宽条件下，只有其中的30左右可以用做存储，所以NAS无法发挥其应有的性能，这就需要等待G/T比特级以太网络的大规模普及应用。一个NAS包括处理器，文件服务管理模块和多个的硬盘驱动器用于数据的存储。NAS 可以应用在任何的网络环境当中。主服务器和客户端可以非常方便地在NAS上存取任意格式的文件，包括SMB格式（Windows）NFS格式(Unix,Linux)和CIFS格式等等。NAS 系统可以根据服务器或者客户端计算机发出的指令完成对内在文件的管理。另外的特性包括：独立于操作系统，不同类的文件共享，交叉协议

31、用户认证，浏览器界面的操作/管理，和增加和移除服务器不会中断网络服务，NAS是在RAID的基础上增加了存储操作系统，因此,NAS的数据能由异类平台共享。,EMC-NAS Platform,EMC Network Attached Storage(NAS),Celerra SE,EMC High-End NAS,EMC Midrange NAS,CLARiiON IP4700,NAS的结构,NAS 结构和SAN最大的区别就在于NAS有文件操作和管理系统，而SAN却没有这样的系统功能，其功能仅仅停留在文件管理的下一层，即数据管理。从这些意义上看,SAN和NAS的功能互为补充，同时SAN的服务器访问

32、数据的时候不会占LAN的资源，但是NAS结构的服务器都需要和文件服务器进行交互，以取得自己请求的数据，因此，NAS结构在速度慢的LAN（如10/100M网络）上几乎不具有任何优势和意义。,NAS的特点,无人值守。随着信息系统规模的膨胀，基本设备的数量将变得非常庞大。如果还是像现在这样每台服务器派专人管理，那么管理成本会不可控制，成为一个天文数字。所以这些基本设备必须实现无人值守，在长时间没有专职人员对其管理维护的情况下仍然可以稳定高效的工作。具有高度智能化。要实现无人值守这一特性，就需要设备本身具有高效的自我维护功能，自动完成目前由管理员负责的日常维护工作。这就需要一套智能化很高的专家系统运行

33、在设备中。性能稳定。无人值守的服务器对性能稳定性的要求可想而知，目前大多数服务器的稳定性对这一特性来说，显得力不从心。功能单一化。目前所使用服务器的功能强大实际上是以软硬件系统复杂的结构、庞大的规模为代价的。结构和规模都是和性能的稳定性成反比。为了实现性能的稳定和管理的简易，最容易想到的方法是把通用服务器的各种功能分离出来，利用嵌入式技术，设计出功能单一，结构简单，性能稳定的专用瘦服务器。,NAS与SAN比较,SAN和NAS并不是相互冲突的，是可以共存于一个系统网络中的，但NAS通过一个公共的接口实现空间的管理和资源共享，SAN仅仅是为服务器存储数据提供一个专门的快速后方通道，在空间的利用上，

34、SAN和NAS也有截然不同之处，SAN是只能独享的数据存储池，NAS是共享与独享兼顾的数据存储池。因此，NAS与SAN的关系也可以表述为：NAS是Network-attached（网络外挂式），而SAN是Channel-attached（通道外挂式）。,SAN和NAS体系的主流厂商及技术体系列表,SAN和NAS体系列表,SAN和NAS并不是相互冲突的，是可以共存于一个系统网络中的，但NAS通过一个公共的接口实现空间的管理和资源共享，SAN（网络外挂式），而SAN是Channel-attached（通道外挂式）。,SAN和NAS的综合,SAN和NAS并不是相互冲突的，是可以共存于一个系统网络中的

35、，但NAS通过一个公共的接口实现空间的管理和资源共享，SAN（网络外挂式），而SAN是Channel-attached（通道外挂式）。,TCP/IP,File Server,data,data,data,data,data,data,data,data,data,data,data,Network becomes the bottleneck if NAS only,A focus on Multi Path File System,NAS,SAN,MPFS,MPFS=Multi-path file system“Highroad”,Channels,IP,File,Block,Multi-p

36、ath File System(High Road)-SAN/NAS Integration,Web Content,Ad Server Content,BLOBs,Flat Files,SAN switch,Servers,IP Network,Symmetrix,Network Infrastructure,Network request,channel or network deliveryDelivery optimizationPerformance and sharingBest of both worlds,Intelligent Data Delivery,Compliment

37、ary benefits-why you need choice,Channels,IP,File,Block,NASDistanceSharing,SANPerformance Control,MPFSPerformanceSharing,Choice can be confusing:how do I choose?,Consolidation,Collaboration,Distribution,SAN or NAS?,SAN=Storage Area Network,NAS=Network Attached Storage,SAN or NAS?,SAN or NAS?,You can

38、 do it with SAN&NAS,SAN+NAS=Networked StorageUser environment determines technology choice:Application mixPerformance requirementsLocation of computing resources,The EMC Networked Storage,DAS,Symmetrix,NAS,Celerra,DAS=Direct Attached StorageSAN=Storage Area NetworkNAS=Network Attached StorageMPFS=SA

39、N and NAS sharing,User network,MPFS,Benefits of Networked Storage,Lower costs of administrationCentralized management of storageResource sharingFaster growthImproved scalability,flexibilityBetter IT servicesIncreased reliability and availabilityTraditional battle:SAN vs.NASBut both types of services

40、 are needed!Storage utility model,数据存储技术现状,从1999年开始，EMC、IBM、Compaq、Sun、HP等公司相继推出自己的SAN产品，使SAN成为存储领域的一个新星，整个业界都在围绕SAN大做文章。(1)SAN的互操作性问题 存储的互操作性分为两个方面：一是存储设备支持不同的服务器系统。这个问题已经得到了很好的解决，存储供应商的存储设备都能够做到支持主流操作系统，或者是其中的某些版本。目前，多服务器平台的SAN解决方案是一个发展趋势。,互操作性的另一个方面是如何支持多厂商的存储系统，这就是Open SAN解决方案的核心问题。Open SAN的目标是支

41、持任何应用程序、操作系统、文件系统、服务器平台、存储系统、磁带库以及客户所要求的互连设备，解决棘手的设备兼容问题，使网络设备发挥最大的效率。在这个方面，采用开放式的标准是大势所趋。据权威调查机构IT Centrix的存储网络调查表明：只有不到30%的用户会选择专有存储解决方案来满足企业需求。因此，企业迫切需要Open SAN。2000年7月，Compaq与IBM共同在Open SAN方面投资10亿美元，开发各自存储软硬件产品的相互支持功能并销售对方的主要存储产品，以共同促进客户采用开放式存储区域网络解决方案。,(2)数据存储标准之争的问题SAN采用的是专门的协议，而NAS使用的是IP协议，而目

42、前，为了维持对现有的SAN的兼容性，出现了几大存储技术流派，整个存储技术市场形成了百花齐放的局面：Internet工程任务组（IETF）提出的基于TCP的SCSI（iSCSI）方案、IETF与ANSI（美国国家标准机构）共同提出的基于IP的光纤方案、ANSI提出的光纤骨干网方案。各种方案互不相让。无论如何，一个存储网方案的出台，其标准的主体定义必须完整细致，不然将难以推广运用。以下是这几种方案的简单介绍：,iSCSI（SCSI over TCP）：iSCSI方案由Adaptec、Cisco、HP、IBM、Quantum等公司共同倡导。它提供基于TCP传输、将数据驻留于SCSI设备的方法。在千兆

43、以太网出现以前，要传输这种类型的块数据，LAN的速度是无法胜任的；现在，10G以太网即将登台，这种基于IP传输块数据的方案无疑更具吸引力。iSCSI并不改变传统标准通信方案和网络基础架构的设置，但需要额外的千兆光纤以太网路由器及复杂的相关路由器软件来支撑，透过网络，以IP数据形式实现存储设备中SCSI数据的传输。iSCSI是基于IP协议的技术标准，实现了SCSI和TCP/IP协议的连接，对于以局域网为网络环境的用户，只需要不多的投资，就可以方便、快捷的对信息和数据进行交互式传输和管理。iSCSI的产生解决了开放性、容量、传输速度、兼容性、安全性等问题，其优越的性能使其自发布之始便受到市场的关注

44、与青睐。,FC over IP:基于IP的光纤通道方案，由Brocade通信系统公司、Gadzoox网络、Lucent科技、McData及Qlogic公司共同提出。采用这种模式，意味着在千兆以太网、SONET或ATM LAN、WAN或城域网(MAN)中，光数据帧被压缩为IP帧传输。虽然基于IP的光纤规范尚在完善中，但现在一些厂商已开始销售这类产品，用来连接在地域上分离的存储局域网（SAN），他们声称这些产品可在规范形成时，运用软件进行升级。同时，Brocade与Gadzoox也是向ANSI提交“光纤骨干网方案”的厂商。光纤骨干网方案较基于IP的光纤方案而言，支持更广地域，性能也更高。,(3)基

45、于纯IP的存储方案登台亮相基于IP的存储方案，事实上是iSCSI和基于IP的光纤方案的扩展。最初由Nishan系统公司提出，后由Dell、Quantum、Siemens及Sun投资开发。Nishan说，这种方案最终将成为标准之一，并声称可填补这一领域很多的技术空白。目前，大多商家对这一方案还持观望态度。因为该方案在很大程度上有一厢情愿的因素，指望依靠创建另一个单一标准，达到综合运用前三种方案所有优势的目的，基本上是不可能的。,Direct Access File System(DAFS)体系：这是由NAS体系一度的最大生产者Network Appliance公司开发的一种协议，称为虚拟接口（V

46、I），该协议旁路了TCP协议栈，降低了时延。当交互建立后，数据直接从缓冲区搬移到网卡，这将比UNIX的NFS和NT的CIFS提供更好的性能。这两者都通过TCP/IP和NAS服务器通信。采用IP方式的好处就是可以利用公用的数据网络，减少租用线的费用。TCP/IP的许多开销和不稳定性都采用了一些新的方式来克服，如采用“巨型”帧，QOS，VPN和加密方式。IP方式的解决方案到底能不能在企业一级的解决方案中得到应用，还得看今后市场的反映情况，目前的形势是一片大好。,光纤通道目前是建立SAN架构的唯一选择，但是随着新技术和市场的双重作用，将来可能会用G/10G以太网和/或InfiniBand架构（简称I

47、BA）来实现SAN。尽管光纤通道是一种占主导地位的SAN互联技术，但仍然存在一些问题。设备层的互操作性已经不再是主要的问题了，但交换机之间的互操作性却是一个潜在的问题。另一个主要的问题在于SAN的管理。当前，大多数SAN管理解决方案都需要一个独立的以太网连接，这样才能传递管理指令。这种管理被称为“带外管理”。,数据存储技术展望,Infiniband规范体系结构（简称IBA）包含一下重要核心内容：协议分层结构、面向多层的连接、基于包交换的通信、多播（组播）能力、包及单节点容错、子网管理能力、支持多种连接速度（单速,4速，12速）、提供2.5Gbps(单速)/10Gbps(4速)/30Gbps（1

48、2速）单向数据链路、PCB,电缆和光纤传输媒介、远程DMA访问的支持、QOS问题的考虑。,基于Infiniband的计算机体系结构,Infiniband沿袭了SAN和NAS的一些概念，Infiniband将处理计算、存储I/O、网络I/O等功能完全分开，这种设计真正体现了计算机体系结构的最终思想，即以网络为中心的架构。采用这种架构，可以非常灵活的根据用户的需要来定制系统，对于高性能计算，如果对计算能力要求非常高，那么就需要将处理节点的数目配置的非常高，对于网络服务器，如视频服务应用，对存储，网络带宽，内部数据交换能力要求很高，这时候，系统就需要根据这种要求来定制。,基于Infiniband的计

49、算机体系结构,数据存储技术发展走向,数据存储的服务器体系结构的演变,按照目前发展的进程，由于10G以太网交换机将与Infiniband交换机将同时问世，未来的几年也许是这两种体系下数据存储解决方案的又一场恶战，结局到底如何，我们还得看3年以后的市场情况，除非有比10G以太网更诱人的价格，那么从感觉上说Infiniband的风头将会被10G以太网完全盖过。从最初的服务器，到目前的围绕数据存储解决方案的一些变化，我们可以大体上看出计算机服务器体系结构网络化的趋势，即目前的内部总线架构将逐渐走向消亡，形成交换式（fabrics）网络化发展方向的趋势，在最初，数据存储、计算处理和I/O是合为一体的，而

50、目前数据存储部分已经独立出来，未来将是I/O和计算处理的进一步分离，形成数据存储、计算处理、I/O吞吐三足鼎立的局面，这就是真正的服务器网络化体系结构,数据存储的服务器体系结构的演变,数据备份,一、数据完整性,数据完整性这一术语用来泛指与损坏和丢失相对的数据的状态，它通常表明数据的可靠性与准确性是可以信赖的，同时也意味着数据有可能是无效的或不完整的。数据完整性包括数据地正确性、有效性和一致性。（1）正确性。数据在输入时要保证其输入值与定义这个表相应的域的类型一致。（2）有效性。在保证数据有效的前提下，系统还要约束数据的有效性。（3）一致性。当不同的用户使用数据库时，应该保证他们取出的数据必须一