EMC Isilon存储方案 - 图文 下载本文

Isilon集群存储方案介绍

存储设备项目 Isilon集群存储方案介绍

2012年4月16日

1

Isilon集群存储方案介绍

目录

1

解决方案...........................................................................................................................................................4

1.1 ISILON概述 ...............................................................................................................................................4

1.2 方案设计 .................................................................................................................................................5

1.3 方案指标汇总 ........................................................................................................................................7

1.4 方案竞争优势 ........................................................................................................................................7

1.4.1 超大可扩展容量...........................................................................................................................7

1.4.2 超快扩容速度 ...............................................................................................................................7

1.4.3 可增长的高性能...........................................................................................................................8

1.4.4 高可靠性 ........................................................................................................................................8

1.4.5 高可用性 ........................................................................................................................................8

1.4.6 高可维护性 ...................................................................................................................................8

1.4.7 高利用率 ........................................................................................................................................9

1.4.8 适合多应用环境...........................................................................................................................9

2 服务方式与级别 .............................................................................................................................................9

2.1 概述 ..........................................................................................................................................................9

2

Isilon集群存储方案介绍

2.2 技术支持 .............................................................................................................................................. 10

2.3 在线支持 .............................................................................................................................................. 10

2.4 本地服务支持 ..................................................................................................................................... 11

2.5 售后服务技术支持详述.................................................................................................................... 12

2.6 地域覆盖 .............................................................................................................................................. 12

3 产品技术参考............................................................................................................................................... 13

3.1 特性与优势.......................................................................................................................................... 13

3.1.1 开放式架构 ................................................................................................................................ 13

3.1.2 分布式操作系统........................................................................................................................ 15

3.1.3 统一命名的空间........................................................................................................................ 18

3.1.4 高性能 ..........................................................................................................................................20

3.1.5 易安装和管理 ............................................................................................................................ 21

3.1.6 扩容简易 ..................................................................................................................................... 23

3.1.7 数据安全性高 .............................................................................................................................25

3.2 产品技术规格 ..................................................................................................................................... 30

4 ISILON+IQ部分成功案例简述 .................................................................................................................. 31

3

Isilon集群存储方案介绍

1 解决方案

1.1 Isilon概述

Isilon/美国赛龙集群存储系统有限公司是2001年成立于美国西雅图,是专门面向集群存储领域的存储提供商;2007年十月进入中国市场,目前在中国市场有比较多的客户,主要集中在能源、媒体、高性能、生命科学等领域,2010年成为EMC旗下企业。2011年6月27日,根据标准性能评估机构(SPEC?)的独立基准测试结果,Isilon S200横向扩展NAS系统成为新的业界性能领导者。按照最新的SPEC基准测试了网络文件性能和整体响应时间, EMC Isilon S200横向扩展NAS平台获得了创纪录的性能测试结果,超过竞争对手最接近测试结果的两倍多。

Isilon IQ集群存储系列产品设计基点是为满足以数据为核心的企业对高性能计算环境的要求。Isilon的集群存储方案是由OneFS?操作系统软件和最先进的符合行业标准硬件所组成,提供灵活的“按需购买,渐进扩展”(pay-as-you-grow)的企业级集群存储系统。内置 TrueScale?技术的OneFS,使Isilon IQ成为业内第一个也是惟一的能使性能和容量线性或独立升级的存储系统。这种灵活可调节的新型系统拥有一套高效的集群存储软件应用,为用户提供了现成的存储方案,完全满足多种应用和工作流需要。

Isilon IQ集群存储产品线满足企业全方位的存储要求,从最高性能的一级应用到二级的企业归档、磁盘到磁盘备份和灾难恢复。基于OneFS操作系统,Isilon IQ系列产品能提供易于安装和增容的单个可扩展存储池。

4

Isilon集群存储方案介绍

1.2 方案设计

根据需求选择Isilon产品线X、S系列中的构成存储集群,应用Isilon存储的两种型号,Isilon S200、Isilon X200。Isilon IQ S200配置双路Intel Xeon Westmere(四核)处理器,每节点高达96GB高速缓存,每节点提供2个1Gbps千兆以太网接口及2个10Gbps万兆以太网接口;Isilon X200配置双路Intel Xeon Nehalem(四核)处理器,每节点高达48GB高速缓存,每节点提供2个1Gbps千兆以太网接口及2个10Gbps万兆以太网接口、2个Infiniband接口,后端选用40Gbps QDR Infiniband交换机。

此次项目选用3台Isilon S200+3台X200共6个节点组成集群存储,单节点容量54TB,集群提供12个Intel Xeon(四核)处理器,90GB高速缓存,12个10GE万兆+12个GE千兆以太网接口,8个内部QDR Infiniband接口,共提供40Gbps最大吞吐量。后端使用8口万兆Infiniband交换机做内部数据交换。

5

Isilon集群存储方案介绍

6

Isilon集群存储方案介绍

1.3 方案指标汇总

项目 S200单节点处理器 单节点缓存 后端IB QDR接口数 前端网络接口 X200单节点处理器 单节点缓存 后端IB QDR接口数 前端网络接口 内容 双路Intel Xeon Westmere (四核)处理器, 24GB 2个 2个Gige和2个10Gige 双路Intel Xeon Nehalem(四核)处理器 6GB 2个 2个Gige和2个10Gige

1.4 方案竞争优势

1.4.1 超大可扩展容量

此集群可以扩展至144个节点加144个扩展抽屉。并且所有空间都属于同一文件系统,也就是说,扩充的容量不需要做新的RAID或者加入到现有RAID,不需要建立逻辑卷,不需要创建文件系统,不需要修改使用存储客户端的任何设定。

1.4.2 超快扩容速度

使用RAID技术的存储系统扩容不便,向RAID中增加新的容量只能以一到两块盘为单位,且需要长时间重建和同步,这对增加上百TB的容量是不可想象的,而新容量做成新的RAID又会浪费更多的空间做冗余且往往需要修改使用存储的客户端设定。Isilon集群存储由于采用了专利的OneFS核心系统,没有RAID概念以及相关的重建过程,因此每增加一个节点至可用容量只需要60秒钟,比如我们需要再增加10个Isilon节点,连线完毕通电后仅需要10分钟后即可将其加入到可用容量中!

7

Isilon集群存储方案介绍

1.4.3 可增长的高性能

由于Isilon存储系统的“集群化”设计,决定了其性能能够和容量同步提升的特点,就类似动车组列车,每一节车厢(Isilon存储节点)都有自己的动力(处理器、高速缓存和对外网络接口),而不像传统的列车,靠一个动力强劲的车头(存储机头)拉动一批没有动力的车厢(存储扩展柜),如果车头能力不变(一般的存储系统,机头的性能是固定或者几乎没有太大扩展能力的),增加新的车厢(增加存储扩展柜,扩容),只能造成性能的下降。

1.4.4 高可靠性

一般的存储系统都采用RAID技术来进行数据保护,这样能够保证一到多块硬盘同时损坏而不产生数据丢失,而Isilon的N+M保护级别允许同时1~4个节点(存储盘柜)同时损坏且数据不丢失,这是任何RAID技术无法实现的,具有更高的安全性。并且Isilon文件级别采取不同的保护,重要数据使用高保护级别,相对不重要的采用低保护级别,既保障了数据安全,又节省了宝贵的存储空间,并且保护级别可以随时在线更改不需要停机。

1.4.5 高可用性

类似动车组的存储节点设计配合双冗余的交换机等附加设备,Isilon集群存储不存在单点故障。SmartConnect Advanced技术实现了用户的负载均衡和动态迁移,保证了资源的有效利用和存储故障时所有用户不掉线。

1.4.6 高可维护性

Isilon存储集群由外观和设计完全一样的存储节点构成,连线和维护异常便利,附加的设备也只有后台交换机,架构异常简单。每一个Isilon存储节点上都可以进行管理,这样不会出现传统存储的机头损坏就无法进入管理系统的情况。而且由于不需要做RAID,逻辑卷和文

8

Isilon集群存储方案介绍

件系统,无论是维护10TB还是1000TB数据,管理难度和复杂度都没有任何区别。

1.4.7 高利用率

与传统存储扩容需要做新的RAID不同,不改变保护级别的情况下Isilon存储集群实现数据保护的容量损失是固定的,比如N+1保护级别下的9个X200节点可用容量是96TB左右(损失一个节点的容量),这时候再增加一个节点IQ X200,它的12TB空间都会是可用容量,而不会因为数据保护而容量损失,这是传统存储很难做到的。这个优势在节点越多容量越大的情况下越明显,最高级别的保护下(N+4保护级别,同时允许4个节点即个4个盘柜同时损坏)存储空间可用率最高仍然可以接近96%,如果存储系统需要面向未来大规模扩容,空间利用率将是非常重要的,毕竟海量存储容量下几个百分点的差距都会产生可用空间数十TB的区别。

1.4.8 适合多应用环境

Isilon类似“动车组”的模块化集群化设计注定其无论在要求存储高性能的HPC高性能运算领域,要求海量的数据备份领域还是常规应用领域都可以游刃有余,专利的FlexNet功能还能保证各个业务网络层隔离,互不影响。

2 服务方式与级别

2.1 概述

Isilon出众的技术支持是您的企业IT运作成功的关键。我们认为仅仅是在问题出现后再作出反应是远远不够的,Isilon能帮您防患于未然,确保您的存储系统总是表现出处理的高性能、

9

Isilon集群存储方案介绍

数据的高可用性和运作的高效率。

Isilon 全球服务体系能够提供业内最灵活的技术支持方案,让企业能够充分利用支持服务,满足其独特的IT 和业务需求。每一家企业面临的问题都不同, Isilon 全球服务体系将根据您的人员和IT 特点,为您量身定做最合适的服务方案。

采用最适合自己的技术支持方案,企业用户能够建立一个全球支持战略,使每一笔IT投资的回报达到最大化。

2.2 技术支持

Isilon 技术支持致力于让您的Isilon投资物超所值。我们提供的技术服务包括: ?

全面的故障分析

? 硬件和软件技术支持

? 全天24小时电话、邮件和网站支持

? 远程问题通知

2.3 在线支持

客户可随时登录Isilon网站,获得在线技术支持: ?

Isilon知识库

? 登陆填写服务请求

? 在线技术培训

? 下载升级软件

10

Isilon集群存储方案介绍

技术支持项目 银级支持 黄金级支持 白金级支持 Isilon 知识 (知识库) 远程监控和诊断 北美免费热线支持 工作日的远程技术支持 24x7 全天远程技术支持 次日配件派递(全球范围内) 一级城市4小时内配件送达(全球范围内) 现场备用件 2.4 本地服务支持

在Isilon,我们深知快速有效提供现场支持的重要性。在我们的白金和黄金客服计划中,Isilon 的区域服务代表在您需要的时候,随时准备为您服务,包括提供远程系统诊断和送递配件到现场。其他现场服务,可通过请求以下一个咨询服务:

? 先进的存储整合

? 备份和恢复整合

? 数据迁移服务

11

Isilon集群存储方案介绍

2.5 售后服务技术支持详述

技术服务体系:

美国总部中技术支持中心

大中国区技术支持中心 华北区 技术支持中心 华中区 技术支持中心 华南区 技术支持中心 增值代理 /集成商 增值代理 /集成商 增值代理 /集成商 大中国区客户

2.6 地域覆盖

以北京、上海、广州服务中心为区域的枢纽。

12

Isilon集群存储方案介绍

3 产品技术参考

3.1 特性与优势

3.1.1 开放式架构

首先,解释一个概念,scale-up和scale-out是什么?

Scale-up和scale-out技术都是从服务器领域衍生出来的概念。在服务器领域,从早期的mainframe到Unix小型机到现在最为流行的集群架构,就经历了从scale-up架构到scale-out架构的转变。

开始的mainframe和Unix小型机都是标称最大可以支持若干CPU和若干内存,但是实际购买时,却不会一次到位,而是按需扩展,比如第一次先买4个CPU,8G内存。过一两年以后,扩展到8个CPU和16G内存;当某一天达到此系统的上限以后,服务器的处理能力就不能通过在原来服务器里面扩展CPU和内存来实现了,而只能购买新的服务器来实现。这种架构就叫做scale-up架构,其含义就是设备处理能力上限在购买时已经确定,如果需求超过上限,只能重新购买更高性能的设备。

现在流行的集群架构是完全采用了积少成多,采用搭积木的方式来实现高端服务器的处理性能。构成集群系统的个体本身性能并不高,但是通过把成百上千台个体聚合起来,其提供的处理能力就可以比高端的服务器还要高。目前世界上最快的计算系统,就是采用这种架构来完成的。这种采用搭积木模式搭建起来的系统采用的就是scale-out的架构。这种scale-out架构本身就是一种开放式的架构。当把这种架构移植到存储设备上,就形成了scale-out架构的存储。

Isilon公司的集群存储作为scale-out NAS领域的领头羊,具有如下的架构特点:

13

Isilon集群存储方案介绍

如图所示,Isilon集群存储分为三个组成部分:

? 前端网络

Isilon集群存储前端网络目前采用万兆以太网,接入客户现有环境的核心交换机内部。

? 存储节点

Isilon集群存储的存储节点分为五大系列(其中S,X,NL三大系列又被称为平台节点,Accelerator和EX扩展节点又被统称为扩展节点),十四小类:

? 后端网络

目前Isilon集群存储架构支持QDR的Infiniband交换机。 支持的厂家包括Flextronics,QLogic,CISCO,Voltaire等。

14

Isilon集群存储方案介绍

3.1.2 分布式操作系统

Isilon是软硬件一体的解决方案提供商,其底层硬件结构是基于一种开放式结构的(参见上节,开放式结构)。硬件层之上是Isilon拥有完全版权的操作系统OneFS,它既是操作系统又是文件系统,是一种全分布的操作系统。

OneFS 是Isilon 已经提出专利申请的分布式文件系统,为Isilon IQ 提供了核心智能特征。OneFS 通过使用一个分布式锁管理器、一个缓存和一个维持集群内全局一致性的区域管理器,来保持节点的同步。正是由于这种整个集群节点间的全局一致性,避免了访问文件系统时的单点故障。集群内的任何一个节点都能处理读写要求,都能代表整个文件系统的功能特色。集群内的所有节点都具有同等地位, 因此整个系统是完全对称的,克服了节点的等级差异和内在的瓶颈。

其他存储系统通过RAID和卷管理层来传输数据,产生了数据布局的低效率。而OneFS

15

Isilon集群存储方案介绍

直接在单独的磁盘上控制文件的布置,通过优化文件在集群上的分配,极大地改善了磁盘子系统的性能。 通过以一个文件接着一个文件的方式在磁盘上布置数据,OneFS能在卷、目录甚至是文件的层级上来控制存储系统的冗余水平。

OneFS还有其他几个特点和好处。FlexProtect-AP?软件提供了最新的功能性,能在短时间内重建发生故障的磁盘,利用整个集群内的空余存储空间来规避数据丢失的风险,主动地监控和抢先将数据从有风险的组件迁移出去。传统的企业存储系统将等值重建操作局限在存储系统的子集内进行,这导致出现了恢复的瓶颈,增加了重新保护数据的时间,大大增加了当单个组件发生故障时数据丢失的风险。传统的RAID-5等值保护如果在重建工作完成之前如果出现多个组件故障,就会引起数据丢失。相比之下,FlexProtect-AP能自动地将所有的数据和错误更正信息分布到整个集群上,其高效可靠的错误更正技术保证了所有的数据保持完整,即使在同时出现多个组件故障的情况下也能被方便地被存取。 在OneFS之外,有五个需要单独付费购买的模块:

SnapShotIQ:Isilon SnapShotIQ 提供了秒级快照的解决方案,和其他厂商的快照方案不同的是,snapshotIQ是基于目录或者子目录层次做快照;而且每个目录可以维护高达1024个快照;做快照不需要预留空间。

SmartConnect:SmartConnect IQ提供了前端网络的负载均衡模式,可以提供Round Robin,CPU忙闲,网络吞吐量,网络连接数等四种均衡策略。另外对于NFS协议,SmartConnect提供了基于NFS协议的的IP failover方式,提供了对TCP连接的容错。

16

Isilon集群存储方案介绍

SmartQuotas:Isilon SmartQuotas是空间访问限额模块,通过此模块可以对目录和用户实现空间限额。另外此模块,可以非常容易的加入客户环境中现有的AD,NIS,LDAP等用户控制域,更好的提供基于用户的访问空间限额。另外还可以提供thin provisioning的功能,实现跨用户空间的共享。

Aspera for Isilon IQ:此模块提供跨城域网WAN,快速数据同步的机制。

SyncIQ:Isilon SyncIQ是用于异地容灾的模块,可以在两个集群存储之间同步数据。 传统的文件系统使用集中服务器来管理多个存储资源,致使出现了存储系统内的依赖性,故障点和热点。使用OneFS操作系统软件,Isilon集群存储系统内的每个节点享有同等地位,因此任何节点都能处理请求。OneFS使用Infiniband?进行集群内通信和同步,使用拥有专利的B-tree技术,将所有数据(包括元数据)完全并行的分布到所有节点中,这样每个节点都清楚整个文件系统的布局,以及每个文件和文件部分存放在哪个地方,不需要专门的元数据

17

Isilon集群存储方案介绍

服务器,从而杜绝了其他存储架构出现元数据服务器热点问题。

在使用过程中,可以根据应用的需求,随时调整客户端可访问存储节点的数量。例如在网段一中,作业分为paradigm group1和paradigm group2,其中paradigm group1要求完成的时间更紧张些,通过实时的调整配置,而把尽量多的存储节点的数量优先让给group1的作业使用;

如上图所示,可以调整配置,对于时间要求不太紧的paradigm group2作业,可以只让访问三个节点,而其他全部节点的处理能力都由paradigm group1来使用。

如果在使用过程中,有更多网段的客户端需要访问集群存储的节点,可以实时按照要求更改存储节点的网段配置,以满足不同数据访问的需求。

3.1.3 统一命名的空间

真正的分布式单一全局命名空间与简单的命名空间综合不同,Isilon的OneFS分布式文件系统可以智能地将数据存放到集群的节点上,创建一个共享存储池,应用范围很广,包

18

Isilon集群存储方案介绍

括对非结构化数据的制作、分析、传输和归档。

图 1 Isilon? IQ开放式系统架构示意图

目前业界有很多存储也声明支持大容量(上P级)的统一命名空间,但是底层无一不是通过将若干卷挂载在一个根目录下来形成的大容量统一命名空间。这里试想传统存储的一个场景,假如A机头挂接了D1的LUN,B机头挂接了D2的LUN。那么无论怎样将数据分布,通过B机头访问D1lun里面的数据,必然要通过A机头将数据从D1LUN读出,传给B机头,这样很容易出现存储热点问题。而Isilon集群存储则是将所有节点的存储空间通过专利技术整合到真正的单一文件系统OneFS中,因为是单一文件系统,就不会发生跨LUN而发生的性能问题。

目前Isilon的集群存储,最少需要三个节点,最多支持144个节点(144的限制不是系统本身的上限,而是infiniband交换机端口数的上线,目前最多端口的IB交换机是144端口),最大单一文件系统的大小为2PB。

当集群增加新的节点和容量后,Isilon? IQ专有的AutoBalance功能会自动实时通过IB交换机平衡数据在集群节点上的分布,而且OneFS(单一文件系统)能够动态调节数据重新分布进程的级别,更好的利用存储和服务器的资源,为客户端提供更加有效的性能,最大化

19

Isilon集群存储方案介绍

程度提高性能和存储利用率,消除停机时间。有了Isilon? IQ,当您升级存储系统时,再也不需要手动地迁移数据或者是改变应用逻辑了。

3.1.4 高性能

Isilon集群存储的吞吐性能将随着节点的增加而增加,其曲线参见如下图形:

根据实际测试结果,Isilon集群存储节点上的每个万兆以太网卡,大约可以提供1000MB/s的带宽。集群存储的聚合带宽,可以用1000MB/sx每节点千兆网卡数量x节点数来获得。

衡量一个存储架构的优劣,无外乎从读写两个方面来看,现举例说明Isilon集群存储读写操作的特点:

20

Isilon集群存储方案介绍

某个客户端发起读写请求,通过核心交换机,向Isilon集群存储发起读写请求。以Isilon八个存储结点实例,Isilon分布式操作系统,内嵌SmartConnect模块是做负载均衡用的,,从八个结点里头选择出目前最闲的结点来接收此次读写请求的文件,这个文件到了结点之后,并没有立刻写到磁盘上;此时OneFS会把这个文件自动地由分成八个小块(现在以八个结点举例),通过后端的IB交换机,带宽高,网络延迟小,通过IB交换机的内存级别拷贝功能把八小块数据分别写到其他节点各自的硬盘上。

形象地举个例子,传统架构数据要写到磁盘上,相当于一个人(一个机头)搬八个箱子,而Isilon集群存储是八个人搬八个箱子,效率和速度大大提高,这种并行架构决定了写的性能比一般的存储性能高很多。

反过来看读一个文件,这个非常好理解,就是写的一个反过程,也就是充分利用了Infiniband的带宽和内存级别拷贝,从这个角度看,我们的集群存储给客户提供了非常高的读写性能。

3.1.5 易安装和管理

Isilon集群存储易管理性体现在如下三个方面:

21

Isilon集群存储方案介绍

? 安装简单

传统的SAN和NAS存储在配置过程中,必然要提前做好规划工作,包括硬件上架,连线,存储网络配置,RAID group划分,HBA卡配置,SAN switch配置,LUN划分,卷划分,文件系统创建等等。任何一步出现问题都会影响到存储的使用。

而Isilon集群存储,因为采取了很多专利技术,在客户端看来没有任何RAID,LUN,Volume等这些概念,因此安装起来非常简单,只需要将所有硬件上架,连线,存储网络配置即可,存储系统就可以上线交付使用。 下表是传统存储和Isilon安装步骤对比 SAN + NAS head Rack and cable Plan volume layout Plan RAID group configurations –What type of RAID?? Plan fiber channel network Install fiber channel switch Install fiber channel network Install HBA Configure HBA Configure RAID groups and spares Initialize RAID group Create volumes Create LUNS Format volumes Install filesystem Tune inodes to match file sizes 22

Isilon Rack and cable Network configuration Share data

Isilon集群存储方案介绍

Network configuration Share data Continuously balance system What data to what volume??? ?

管理和配置简单

Isilon集群存储的管理和配置非常简单,管理存储的精力不会随着存储容量的增加而增加。Isilon集群存储提供两种管理界面,一个是基于浏览器的管理界面,一个是全命令行的管理界面,功能完全一致。

3.1.6 扩容简易

Isilon的单一文件系统OneFS,提供了非常好的扩展功能,在扩展节点的时候,不影响原有存储系统的使用,而且在60秒之内,新加入的节点空间就可以被客户端看到且可以使用

23

Isilon集群存储方案介绍

当集群增加新的节点和容量后,Isilon? IQ专有的AutoBalance功能会自动实时通过IB交换机平衡数据在集群节点上的分布,而且OneFS(单一文件系统)能够动态调节数据重新分布进程的级别,更好的利用存储和服务器的资源,为客户端提供更加有效的性能,最大化程度提高性能和存储利用率,消除停机时间。有了Isilon? IQ,当您升级存储系统时,再也不需要手动地迁移数据或者是改变应用逻辑了。 下表是友商和Isilon扩容步骤的对比表 SAN + NAS head Rack and cable Plan volume layout Isilon Rack and cable Press button on front panel Plan RAID group configurations – What type of RAID?? Plan fiber channel network Install fiber channel switch 24

Isilon集群存储方案介绍

Install fiber channel network Install HBA Configure HBA Configure RAID groups and spares Initialize RAID group Create volumes Create LUNS Format volumes Install filesystem Tune inodes to match file sizes Share data Continuously balance system Which of the many volumes does the data go?

3.1.7 数据安全性高

Isilon集群存储的数据安全性非常高,可以提供两个级别的容错,第一个级别是节点级的容错,第二是针对文件夹数据保护

还是用将一个文件写到Isilon集群存储里做示例,还是用八个结点,文件被OneFS分成八个小份,如果采用了N+1的数据保护级别,当某一个节点发生问题了宕掉了,通过节点级容错,数据仍然是安全的、完整的。应为Isilon集群存储每个节点都至少有12块硬盘,因此同时可以允许12块硬盘发生错误,数据都是安全的,这跟传统的数据容错有本质的区别,因为实现容错的架构是在节点操作系统这一级,所以Isilon集群存储可以提供节点型的容错;如果N+1还不能满足要求,我们可以最多支持4个节点,而且数据保护级别可以在线更换,数据仍然是完整的,这个容错机制跟业界其他产品容错机制完全不 一样,这也是

25

Isilon集群存储方案介绍

Isilon集群存储非常有特点的一个产品特性。

节点级容错跟传统RAID比较大的区别是,如果我们存储选用了RAID话需要改变级别的话,唯一的方法就是格式化掉,而Isilon集群存储可以随时在线更改保护级别,不需要更改数据布局,非常方便易用。以上介绍的是第一类的容错:节点级的容错。 对于N+1和N+2的数据保护类型,参见如下存放方式:

26

Isilon集群存储方案介绍

如何实现高可用性和高可靠性

如今的用户不得不处理快速增长的大量数据,而这些数据必须被可靠地存储,能被许多应用和使用者随时访问。对于如何保证业务关键型数据的高可用性和高可靠性,传统存储系统表现出它的严重不足。为了能可靠地升级传统存储构架,IT 管理人员常常会遭遇到一大堆复杂的技术难题,最终会导致运作成本的增加。 单点故障

传统的NAS 和SAN 存储构架都存在固有的单点故障。这些系统一般都在大量的磁盘空间前配置有单一的服务器(或者磁头单元)。一旦这些服务器出现故障,所有对磁盘存储及其数据的访问都会掉线。当一段时间后添加了更多的容量,这些存储系统就变成了更大的存储孤岛。一旦一个服务器磁头崩溃,发生数据不可用的危险就会大增。为了解决这个问题,一些存储厂商提供冗余故障转移技术,这种技术一般要用到“双向集群”,允许安装一对服务器磁头用于故障转移。然而这种解决方案升级困难且成本高昂,因为用户必须购买冗余磁头

27

Isilon集群存储方案介绍

单元和昂贵的集群/故障转移软件附件,管理起来也非常麻烦。

RAID 和奇偶校验数据保护方案 / 驱动器重建时间

传统的奇偶校验RAID 技术,包括RAID4 和RAID5,在过去很长一段时期中都能基本满足存储管理员的要求,提供单个磁盘驱动器发生故障时的数据保护。对于使用容量有限、卷和文件系统较小的存储池的企业来说,这些方案是勉强可以接受的。他们愿意多花点钱在存储管理上,以获取更高的存储可用性。需要注意的是,传统RAID 技术提供的保护需要在重建故障磁盘时,不能发生另一个磁盘故障或者是不可接受的误码。但是现在我们都采用大型磁盘驱动器,发生第二个磁盘故障的概率大增。面密度(指磁盘表面每平方英寸的面积内所能储存写入信息的比特数)以将近100%的复合年增长率在不断加大,但是磁盘驱动器的可靠性和性能并没有同步提高,部分原因是重建驱动器的时间过长。大容量的驱动器,比如250GB 和500GB 的SATA 驱动器,需要更长的重建时间,极大地增加了同时发生几个磁盘故障的可能性,数据丢失的风险不可小视。密集的SATA 磁盘的重建时间可能长达24 小时,增加了同时发生几个磁盘故障的可能。因此,传统的奇偶校验RAID 数据保护技术的局限性在现代数据中心凸显无疑。

28

Isilon集群存储方案介绍

故障部件的检测

当今许多传统存储系统,在发现和处理故障硬件部件问题时,都是被动反应,而非预先应对。因为不具备有预知功能的智能软件,不能预判什么时候会发生故障,传统存储系统将用户的数据置于危险之中。传统存储系统不能在故障发生之前采取预防措施,结果,一旦发生磁盘故障,这些存储系统会经历非常长的重建时间,而如果不幸发生了第二个磁盘故障,数据丢失的风险就非常高。现代磁盘驱动器的密度已大幅提高,发生错误的概率也相应增大,这要求存储系统能预先应对可能发生的错误,确保存储系统的高可用性。这种存储方案必须能低成本高效益地解决固有的单点故障,同时这种存储方案必须是易于操作和管理的。另外,为了能应对现今的大容量单一文件系统和密度更高的磁盘驱动器,这种解决方案必须能在这些组件发生故障时做到成功重建数据,同时能智能地检测出故障,在此类故障发生之前进行自愈。

29

Isilon集群存储方案介绍

3.2 产品技术规格

?

Isilon IQ S系列:

?

Isilon IQ X系列:

30

Isilon集群存储方案介绍

4 Isilon+IQ部分成功案例简述

案例 案例要点 石油和天然气 SEI(Seismic Exchange) ? SEI是领先的地震数据提供商,需即时可靠地全天候访问数据集,然后快速准确处理,并将高质量的信息提供给客户,来支持客户的作业。 ? 采用Isilon IQ的好处:可将总计超过 30,000 英里覆盖面积的 3D 地震影像数据,整合到一个无缝、可扩展的高性能存储池中,极大加快了重要地震信息存储的分发,让客户在高风险的油气勘探竞赛中获得竞争优势。 GGS Spectrum Group ? GGS Spectrum Group 设在四大洲的公司,提供地震数据处理、多客户和海上数据采集服务。GGS-Spectrum 采用 Isilon IQ 将超大量地震数据整合到高性能、高可扩展的单一存储池中,用来简化它的工作流程和推动业务开展。 31

Isilon集群存储方案介绍

? 采用Isilon IQ的好处:更迅速地分析庞大的地震数据,更高效地加快实施全球项目。 中国石油 ? 中石油从事石油天然气领域的各项业务,其中包括原油及天然气的勘测、开发和生产,以及化工产品的生产销售。 ? 采用Isilon IQ的好处:实现了对关键业务信息的即时访问,改进了工作流程协作,极大降低了管理存储增长的成本和复杂性。 媒体和娱乐行业 NBC为北京奥运会转播部署Isilon IQ ? NBC 面临的挑战:NBC将有史以来第一次完全以高清格式进行奥运会的电视转播。广播模式的转变(多种分发渠道、格式和消费模式)使得归档媒体的数量和重要性大幅度提升。只是简单地存储这些内容是远远不够的,还必须让这些内容始终保持联机状态,让用户可以即时调用。 ? 使用Isilon IQ的好处:NBC将大部分2008年北京奥运会的图片和宽带内容保存在Isilon集群存储上,让NBC的制作人员可以十分方便、可靠地获取关键内容,并且能够在美国进行报道所需的快速审查、标识和选择操作。通过部署Isilon IQ,NBC Universal的多个播出与制作单位现在可以即时访问庞大的媒体节目库,而不管它们是在什么位置,从而使NBC Universal能够改善现场直播,或在通过NBC Universal的多个媒体分发网络播出节目方面得到改善。 Clear Channel Communications, Inc. ? 全球媒体娱乐领导者,采用 Isilon IQ 和 Isilon的 SyncIQ复制软件,简化了文件存储,支持 1,100 多个无线广播电台网站的全天候运营,并能够在 32

Isilon集群存储方案介绍

多个北美与欧洲数据中心之间复制数据,进行灾难恢复备份和存档公司的电子邮件。 Discovery Communications, Inc. ? 作为世界排名第一的纪实性媒体公司,Discovery Communications 经常面临的挑战是管理和存储庞大的数字媒体资产库。 ? 采用Isilon IQ的好处:将 Isilon IQ 集群存储作为其媒体内容的集中库,向170 多个国家/地区的 100 多个网络、累计 15 亿个用户分发内容。并整合视频点播 (VOD) 和 DVD 内容,将内容从磁带存档转存到一个易于扩展、始终在线的存储池中,支持通过广播、视频点播和互联网等多个分发渠道,即时全天候访问、配置和分发媒体。 互联网 /Web 2.0 Kodak EasyShare Gallery ? Kodak EasyShare Gallery 将智能组织与精妙的图片共享结合到单一的创新在线服务中。他们选择的 Isilon IQ 集群存储系统能够简化存储架构,支援快速扩大的客户群和不断发展的影像解决方案。 3ality Digital Systems ? 数字 3D 娱乐行业的领军企业 3ality Digital Systems,利用 Isilon IQ 集群存储为真人剧场版 3D 节目的创作和后期制作提供支持。借助 Isilon IQ 集群存储,3ality 将海量而又具有极高解析度的 3D 节目库统一到高度扩展的单一共享存储池中,并只需管理和访问这个池,从而加快并简化了从拍摄到制作、再到制作和播出节目的整个数字工作流。 Sony Music Network ? 作为种类繁多的数字音乐消费服务的提供商,Sony Music Network 部署了 Isilon IQ,以支撑 Sony 音乐在线日本网站的运营。这是一个大容量的在 33

Isilon集群存储方案介绍

线数字音乐分发系统。通过将其巨大的音乐库整合到一个易于使用的高性能存储解决方案,Sony Music Network 可以更好地访问和向消费者分发内容,全面充分地抓住业务增长的商机。 教育和科研 San Diego 超级计算机中心 ? 名列全球超级计算 500 强前 50 位的 SDSC,在使用、创新和提供信息技术支持学术、工业及科学界社团取得科技进步与新发现方面,是全球领导者。其在一个项目中应用 Isilon IQ,为科学视觉化分析应用的新技术突破发挥了作用,支持加利福尼亚大学圣迭戈癌症中心科学家,在其研究工作中取得了更深入的发现,加快了发现过程。 加利福尼亚大学圣塔芭芭拉分校 (UCSB) ? 加利福尼亚大学圣塔芭芭拉分校 (UCSB) 亚历山德拉数字图书馆 (ADL),建有全球最大的地理学参考数据库。ADL 的主要收藏资料包括美国数字高度地形图,斯克里普斯海洋研究所 800 多次探险的影像记录以及美国中央情报局的世界地图。 Cedars-Sinai ? Cedars-Sinai 医疗中心的 Louis Warschaw Prostate 癌症中心,设在 Samuel Oschin 综合癌症研究所,它结合使用了 Isilon IQ、IQ 加速器和 EX 扩展节点,用来存储和分析临床研究数据。Prostate 癌症中心选择 Isilon 集群存储,支持其临床和可能拯救生命的研究。 Austin Radiological Association ? Austin Radiological Association 选择 Isilon IQ 作为其 PACS(图形存档通讯系统)的基础,该系统用于检查和治疗乳腺癌,并很快就积累了 80,000 多张诊断影像,每幅的大小都超过 100MB。通过部署 Isilon IQ,ARA 能够极大简化它的架构,将所有乳腺 X 线摄影术图像统一放置到一 34

Isilon集群存储方案介绍

个单一可扩展的共享数据池中,所有这一切都降低了与存储基础设施有关的成本和维护量。

35