存储的一些概念.doc

1、存储的一些概念 什么是磁带库 磁带库产品包括自动加载磁带机和磁带库。自动加载磁带机和 磁带库实际上是将磁带和磁带机有机 结合组成的。自动加载磁带机是一个位于单机中的磁带驱动器和自 动磁带更换装置，它可以从装有多盘 磁带的磁带匣中拾取磁带并放入驱动器中，或执行相反的过程。 它 可以备份 100GB-200GB 或者更多的数 据。自动加载磁带机能够支持例行备份过程，自动为每日的备份工 作装载新的磁带。一个拥有工作组服 务器的小公司或分理处可以使用自动加载磁带机来自动完成备份工 作。 磁带库是像自动加载磁带机一样的基于磁带的备份系统，它能 够提供同样的基本自动备份和数据恢 复功能，但同时具有更先进的

2、技术特点。它的存储容量可达到数百 PB（1pb=100 万 GB）， 可以实现连续 备份、自动搜索磁带，也可以在驱动管理软件控制下实现智能恢复、 实时监控和统计，整个数据存储备 份过程完全摆脱了人工干涉。 磁带库不仅数据存储量大得多，而且在备份效率和人工占用方 面拥有无可比拟的优势。在网络系统 中，磁带库通过 SAN（Storage Area Network- 存储局域网络） 系统可形成网络存储系统， 为企业存储 提供有力保障，很容易完成远程数据访问、数据存储备份，或通过 磁带镜像技术实现多磁带库备份，无 疑是数据仓库、ERP 等大型网络应用的良好存储设备。 SAN、NAS 技术的分析比较 目

3、前存储市场主要有三种方式：DAS（ Direct Attached Storage）、NAS（Network Attached Sto- rage，网络附加存储）、SAN （存储区域网）。传统的直接存储的 模式 DAS 是直接将存储设备连接到服务 器上，一方面，当存储容量增加时，这种方式很难扩展；另一方面， 当服务器出现异常时，会使数据不 可获得。 NAS 和 SAN 的出现适应了网络正成为主要的信息处理模 式的发展趋势。IBM 大中华区存储事业部 总经理何国伟先生也认为， “未来的世界是网络存储世界， 存储的 外部化将是未来发展趋势，因此 IBM 存储的重点将放在 SAN、NAS 上“。 N

4、AS 简单灵活 NAS-网络附加存储，即将存储设备连接到现有的网络上，提 供数据和文件服务。NAS 服务器一般由 存储硬件、操作系统以及其上的文件系统等几个部分组成。简单的 说， NAS 是通过与网络直接连接的磁 盘阵列，它具备了磁盘阵列的所有主要特征：高容量、高效能、高 可靠。 NAS 将存储设备通过标准的网 络拓扑结构连接，可以无需服务器直接上网，不依赖通用的操作系 统，而是采用一个面向用户设计的、 专门用于数据存储的简化操作系统，内置了与网络连接所需的协议， 因此使整个系统的管理和设置较为 简单。其次 NAS 是真正即插即用的产品，并且物理位置灵活，可放 置在工作组内， 也可放在其他地点

5、与 网络连接。因此，用户选择 NAS 解决方案，原因在于 NAS 价格合 理、便于管理、灵活且能实现文件共享。 以 IBM 为代表的业界各大存储厂商纷纷推出 NAS 解决方案，IBM 公司最新的 NAS 产品主要包括： NAS 200， NAS 300， NAS 300G。 NAS 200 塔式存储设备主要是针对需 要大量高性价比存储设备的 Internet 服务提 供商（ISP）和需要电子邮件存储或视频文件服务的客户；NAS 300 的双引擎设计可以支持关键业务高可 用性应用，如大型部门和小型企业中的应收帐户、工资支付或客户 支持。NAS 300G 网关则是业界第一种 开放式 NAS 设备，

6、能将 LAN 与 SAN 连接在一起， NAS 300G 允 许基于局域网的客户机和服务器与现有存储区 域网（SAN）互操作，实现了 SAN 与 NAS 的统一。 在 2001 年存储展中，有一家专门做 NAS 存储的厂商 AUSPEX 也颇引人注目， AUSPEX 始建于 1987 年，可 称为 NAS 市场的创建和领头羊，AUSPEX 通过其专利技术- 功能 多处理结构（Founctional Multiproces- sing）把文件服务功能的不同功能分解到不同的专用 CPU 上， 借 助专用 OS 为客户提供了大容量、高性能 和高可靠的网络数据服务。其产品系列包括 NS2000 通用网

7、络文件 服务器、NAS3000 系列， 其中 NAS 3010 3010LPDA 最大磁盘容量达 12TB，可接入 36GB 和 73GB 的磁 盘驱动器； NAS3010XR 采用内嵌式 SAN 结构，可 通过光纤通道接入 SAN 交换机，实现对 SAN 的存储管理。 SAN 高效可扩 SAN - 存储区域网络，即通过特定的互连方式连接的若干台 存储服务器组成一个单独的数据网络， 提供企业级的数据存储服务。 SAN 是一种特殊的高速网络，连接 网络服务器和诸如大磁盘阵列或备份磁 带库的存储设备，SAN 置于 LAN 之下，而不涉及 LAN。利用 SAN，不仅可以提供大容量的存储数据，而且地

8、域上可以分散，并缓解了大量数据传输对于局域网的影响。SAN 的 结构允许任何服务器连接到任何存储 阵列，不管数据置放在哪里，服务器都可直接存取所需的数据。 与 NAS 相比，SAN 具有下面几个特点：首先 SAN 具有无限的 扩展能力，由于 SAN 采用了网络结构，服务 器可以访问存储网络上的任何一个存储设备，因此用户可以自由增 加磁盘阵列、带库和服务器等设备， 使得整个系统的存储空间和处理能力得以按客户需求不断扩大。另 外，SAN 具有更高的连接速度和处理 能力。SAN 采用了为大规模数据传输而专门设计的光纤通道技术， 目前的传输速度为 100Mbps，并会很快 开发出传输速度为 200Mb

9、ps 和 400Mbps 的光纤通道交换机。 实 现 SAN 的硬件基础设施是光纤通道，用光纤 通道构筑的 SAN，由 3 部分构成：存储和备份设备，包括磁带库、 磁盘阵列和光盘库等；光纤通道网络连 接部件，包括主机总线适配卡（HBA: Host Bus Adapter）和驱 动程序、光缆（线）、集线器、交换机、 光纤通道与 SCSI 间的桥接器 (Bridge)等；应用和管理软件包括： 备份软件、存储资源管理软件、设备管 理软件。由上可以看出，在 SAN 解决方案中，除存储设备外，其 关键部件就是网络连接部件-光纤交换 机，目前在 IBM、COMPAQ 等各公司提供的 SAN 解决方案中，其

10、 光纤交换机大都由博科通讯公司(Brocade)、 McDATA、Infrange、Qlogic、Vixel、Gadzoox 等提供的。例 如博科公司的产品包括了从 8 端口的入门级 光纤通道交换机到 128 端口企业级交换机，最近推出的 128 端口 的 SilkWorm 12000 核心 Fabric 交换机是第 一个可提供 1Gbps 和 2Gbps 链路速度的第三代 ASIC 型号， 可 支持目前的 2Gbps 光纤通道模块和新兴的存储 协议，如 10Gbps 光纤通道模块、Infiniband Fabric 模块以及未 来的 IP/以太网模块等，还支持可实现存 储虚拟化。McDATA

11、 的口号是提供从核心到边缘的企业解决方案， 其产品系列覆盖从 8 端口 ES-1000 到 ES- 3016、ES-3032 直到 64 端口的 ED-6064 导向器，并定位于高 端应用，McDATA 认为， 所谓高端，一是支持 的端口数多，另一点是产品具有 99.999% 的高可用性，保证在线 数据的定位于高端应用，McDATA 认为， 所谓高端，一是支持的端口数多， 另一点是产品具有 99.999%的 高可用性，保证在线数据的连续性。另 外 McDATA 也提供 EFC MANAGER 管理软件，实现对交换单元 的集中管理。 存储市场的火爆及 SAN 市场的增长，使这些公司也纷纷从幕后

12、走到了前台， 博科、McDATA 不仅在存 储展上大出风头，而且还将在国内成立办事处，进一步提供技术、 服务方面的支持，但博科、McDATA 公 司均表示，OEM 及合作伙伴策略将不会改变。在网络存储技术方面， 博科公司的技术总监许良谋先生表 示，3-5 年内光纤通道技术仍会是主流技术， 但博科公司目前对 iSCSI、Storage over IP、Infiniband 等技术进行密切关注，并加大了研发力度。 结束语 综上所述 NAS 具有安装管理方便、价格平民化等优点，是中小 企业存储的优选方案。 特别是对于部 门服务器目、独立的工作组级的客户，他们能充分享受到 NAS 性能 价格比的好处。

13、而 SAN 可以适用于企业 级数据存储、服务器集群、远程灾难恢复、Internet 数据服务等多 个领域。SAN 和 NAS 因满足用户的不同 层面的应用需求而共存，同时随着 iSCSI、IP、Infiniband 等技术 的不断出现，未来的 SAN、NAS 最终将 逐渐走向统一。 据 IDC 的最近一份研究报告指出，目前，在亚太市场中仅有 10%到 30%的企业采用存储区域网络 (SAN), 这个比率在今年阶段。而在服务器市场的统计表明，基于 SCSI（服务器直连存储）收入的市场份额已从 1999 年的 60%下降到 2000 年的 28，而 IBM 也表示一年前 80%的存储是连接在 S/

14、390 系统，而今年这一数据 已降到 30%。 磁带存储方案的设计与选购 由于数据备份的需要，磁带机的被广泛的应用在文件的下载存 储留档、视频数据存储、数据灾难恢 复、图像艺术资料存储等行业中。 设计磁带存储方案 设计磁带存储方案一般需要考虑存储系统的工作量和完成备份 时间，通常我们将磁带备份技术分为 三类：即桌面备份方案、中型备份方案（中型企业用户）和企业级 备份方案（大型企业用户）。其中桌 面备份即为单机数据系统，使用最多的主要有 DC2000 技术；中型 备份方案属于工作组级数据备份，使用 较多的主要有 Exabyte 的 8mm 和 DAT 技术； 而企业级备份方 案主要涉及数据系统和

15、主机数据备份，使用较 为普遍的是 IBM 的 3480/3490/3590 和各种 1/2 英寸的 9/18/36 轨磁带技术。 各类存储系统对数据量和数据 安全的要求区别较大，设计要求不同，相应在相匹配的磁带备份系 统的价格及性能上有较大差异。 单机数据备份系统： QIC 磁带设备是一种纯粹面向单机数据备份与冗余存储的磁带 备份设备， 是一类低端磁带机，是桌 面备份的重要方案。 它们体积小巧， 磁带驱动器可以放置在标准 的 3.5 英寸托架内，同时还提供并口、 SCSI 和 IDE 等多种连接方式，适用范围广泛， 并得到了许多重要 磁带设备厂商的支持。虽然它们的备份 容量有限（单带容量一般为

16、 4GB），安全性较低，还缺乏即读即写 和硬件压缩等关键技术， 不可能扮演 中高档数据备份的角色，但其低廉的价格、灵活的使用方法，以及 适中的容量与速率完全能够满足单机 数据备份的要求。所以，目前单机备份领域的磁带设备主要是 QIC 磁带系统。 工作组级和部门级网络备份系统： 常常采用 4mm DAT 磁带与 8mm 磁带备份系统。4mm DAT 磁带备份系统虽然容量不是很大， 数据传输速 率也不是很快（一般在 1Mbps）， 但它们在自动磁带加载机的支 持下还是可以满足大多数工作组级数据 备份应用的要求，同时性能价格比也较适中。作为一种增强型 DAT 存储设备，8mm 磁带备份系统的出现为

17、中高档数据备份的提供了一种新方式。 8mm 磁带存储设备是针对 Windows NT 集中式的部门级备份应用， 因此安全性要远远高于 4mm DAT 磁带备份系统。另外，磁带宽度 也决定了它的存储密度至少是 4mm 磁带的 一倍。目前最好的 8mm 磁带备份系统的单带容量达到 20GB、传 输速率达到 3Mbps。其即写即读、冗余磁头 功能的应用，可以满足所有中档数据备份和部分高档数据备份的需 要。 主机数据备份系统： 主要采用 IBM3480/3490/3590 磁带备份系统与基于 LTO 磁 带备份系统。 IBM3480/3490/3590 是一类属 于典型主机时代的 9/18/36 轨磁

18、带兼容技术设备， 主要用于磁带 库的内置磁带系统。该系统的数据吞吐 量极高，可达到 1020Mbps， 但因价格较高、容量相对较小 （10GB）。最新的 SDLT 基于 LTO 标准的磁带 备份系统，因采用了 Ultrium 记录格式和线性读写方式，其可以提 供几乎超过一般磁带设备几倍的容量， 达到 100GB，读写数据传输率也将达到 10Mbps，但价格昂贵， 只能用于高档数据备份系统。 选购指南 根据上面的设计方案，用户可以根据自己的技术要求及预算情况选 择磁带机产品，在选购中请注意以下 问题： 1、考虑升级及兼容性问题 用户在选购磁带机时应考虑未来几年电脑数据量大幅增长的趋 势。据有关专

19、家预测， 在未来的三 年中，数据量将可能增加五倍。因此，用户在选购时应特别注意选 择技术有发展前途的产品，即容量增 大，速度更快，而且最重要的是要与过去和未来的产品兼容。 2、磁带机及磁带的寿命用户在选购产品时比较关心产品的寿命， 寿命越长的产品客户的使用成本 越低。就磁带机产品而言，驱动器及磁带的寿命都很关键。磁带机 的寿命以磁头为主，现有磁头的寿命 在 1 万-3 万小时之间，若以每周 5 天工作日，每天备份 5 小时计， 一个磁头可使用 7 年至 23 年。而磁带的寿 命以磁带经过磁头的次数计算（Pass），目前磁带的寿命在 5,000-1,000,000 Pass 之间。 3、磁带机的

20、可靠性一般磁带机的可靠性以平均无故障时间来计， 目前的平均无故障时间在 10 万-30 万小时间。但在参考这些指标时，用户应特别注意 MTBF 后的 Duty Circle 的百分比数值。Duty Circle 是 指这些指标是在多重的工作负荷下得到的。 例如一个 10% Duty Circle 的 MTBF 是指这个数值是在每天（ 24 小时）只工作 10%的时间，即 24 小时情况下的指标，很显然， 这就比 100%时（即每天 24 小时不间断工 作）的指标要高。 就我们所知， 目前几种品牌的磁带机的 MTBF 有 10%、 15%， 20% 和 100%几种 Duty Circle。 4

21、、软件的兼容性或支持性： 通常使用的操作系统均支持流行的磁带机，例如：NT、SCO Unix 等操作系统内均内置了流行磁带 机的驱动程序，但通常单用户的操作系统（例如： DOS，Windows 或 Macintosh 等）就需另外购买第三方 的备份软件才可使用。一些新操作系统或升级版本出现后，用户可 直接从网上下载其新的驱动程序或与 代理商联络。 5、磁带清洗问题中国每年磁带机销售量在 2 万台以上，但就 我们所知，清洗带在国内的销量却廖廖 无几，而同时我们所接到的一些客户咨询电话却反映出，并不是产 品有问题，而是用户不去定期清洗磁 头，造成数据无法读出。我们希望广大用户要在购买磁带机和磁带

22、的同时，购买清洗带，养成定期清洗 磁头的良好习惯（一般磁带机每工作 8 小时应清洗一次），这样才 能避免一些故障的发生， 也能减少磁 头和磁带的磨损，延长使用寿命。 RAID 知识简介 RAID 代表 Redundant Array of Inexpensive (or Independent) Drive。 RAID 的优点在于三个方面即可 用性(Availability)、容量(Capacity)及性能(Performance)。利 用 RAID 技术于存储系统的好处有： *通过把多个磁盘组织在一起作为一个逻辑卷提供磁盘跨越功能 *通过把数据分成多个数据块（Block ）并行写入 /读出多

23、个磁盘以 提高访问磁盘的速度 *通过镜像或校验操作提供容错能力 根据实际情况选择适当的 RAID 级别可以满足用户对存储系统可用 性、性能和容量的要求。常用的 RAID 级 别有以下几种： NRAID，JBOD，RAID0，RAID1 ，RAID0+1，RAID3 ，RAID5 等。为提高可靠性和性能，常使 用 RAID5 和 RAID（0+1）。下面分别简要介绍各自的原理及特点： *NRAID即 Non-RAID，所有磁盘的容量组合成一个逻辑盘， 没有数据块分条（no block stripping）。NRAID 不提供数据冗余。 要求至少一个磁盘。 *JBOD代表 Just a Bunch

24、 of Drives， 磁盘控制器把每个物理 磁盘看作独立的磁盘，因此每个磁盘都 是独立的逻辑盘。JBOD 也不提供数据冗余。要求至少一个磁盘。 *RAID0即 Data Stripping 数据分条技术。整个逻辑盘的数据是 被分条（stripped ）分布在多个物理磁 盘上，可以并行读/写，提供最快的速度，但没有冗余能力。要求至 少两个磁盘。 *RAID1把一个磁盘的数据镜像到另一个磁盘上，只能在两个磁 盘上实施， 具有最高的数据冗余能力， 利用率为 50%。 *RAID0+1把 RAID0 和 RAID1 技术结合起来， 即 Mirroring+Stripping。数据除分布在多个盘上外，

25、每个 盘都有其物理镜像盘，提供全冗余能力，允许一个以下磁盘故障， 而不影响数据可用性，并具有快速读 /写能力。要求至少 4 个硬盘才能作成 RAID0+1。 *RAID3带有一个专门的校验盘的分条技术。数据被分布在多个 磁盘上以提高读/写速度， 并用一个专 门的校验盘来存储校验信息， 当一个成员盘故障时， 控制器可以 从校验盘重新恢复/生成丢失的数据。RAID3 要求至少 3 个盘，且 其中一个为专职校验盘。 *RAID5类似于 RAID3，但校验数据不是存储在一个专职的校验 盘上，而是分布在多个盘上。 当一个磁 盘故障时，控制器可以从其他尚存的磁盘上重新恢复/生成丢失的数 据而不影响数据的可

26、用性。RAID5 要 求至少 3 个磁盘，容量是（N-1 ）/N。 磁盘阵列 Q/A 1. 什么是磁盘阵列（Disk Array）? 磁盘阵列 （Disk Array） 是由一个硬盘控制器来控制多个硬 盘的相互连接，使多个硬盘的读写同 步，减少错误，增加效率和可靠度的技术。 2.什么是 RAID? RAID 是 Redundant Array of Inexpensive Disk 的缩写， 意为廉价冗余磁盘阵列， 是磁盘阵列在技 术上实现的理论标准，其目的在于减少错误、提高存储系统的性能 与可靠度。 常用的等级有 1、3 、5 级 等。 3.什么是 RAID Level 0 ? RAID L

27、evel 0 是 Data Striping(数据分割 )技术的实现，它将 所有硬盘构成一个磁盘阵列， 可以同 时对多个硬盘做读写动作，但是不具备备份及容错能力，它价格便 宜，硬盘使用效率最佳，但是可靠度 是最差的。 以一个由两个硬盘组成的 RAID Level 0 磁盘阵列为例，它把 数据的第 1 和 2 位写入第一个硬盘，第三 和第四位写入第二个硬盘以此类推，所以叫“数据分割“，因为各 盘数据的写入动作是同时做的，所 以它的存储速度可以比单个硬盘快几倍。 但是，这样一来，万一磁盘阵列上有一个硬盘坏了， 由于它把 数据拆开分别存到了不同的硬盘上， 坏了一个等于中断了数据的完整性,如果没有整个

28、磁盘阵列的备份磁 带的话，所有的数据是无法挽回的。 因此，尽管它的效率很高，但是很少有人冒着数据丢失的危险采用 这项技术。 4.什么是 RAID Level 1? RAID Level 1 使用的是 Disk Mirror(磁盘映射) 技术， 就是 把一个硬盘的内容同步备份复制到另一 个硬盘里，所以具备了备份和容错能力，这样做的使用效率不高， 但是可靠性高。 5.什么是 RAID Level 3? RAID Level 3 采用 Byteinterleaving(数据交错存储)技术， 硬盘在 SCSI 控制卡下同时动作，并将 用于奇偶校验的数据储存到特定硬盘机中,它具备了容错能力, 硬盘 的使

29、用效率是安装几个就减掉一个， 它的可靠度较佳。 6.什么是 RAID Level 5? RAID Level 5 使用的是 Disk Striping(硬盘分割) 技术，与 Level 3 的不同之处在于它把奇偶校验数 据存放到各个硬盘里，各个硬盘在 SCSI 控制卡的控制下平行动作， 有容错能力， 跟 Level 3 一样，它的 使用效率也是安装几个再减掉一个。 7.什么是热插拔硬盘？ 热插拔硬盘英文名为 Hot Swappable Disk，在磁盘阵列中， 如果使用支持热插拔技术的硬盘，在 有一个硬盘坏掉的情况下，服务器可以不用关机，直接抽出坏掉的 硬盘，换上新的硬盘。一般的商用磁 盘阵列在硬盘坏掉的时候，会自动鸣叫提示管理员更换硬盘。