HDS高端存储系统发展历史v10.docx
《HDS高端存储系统发展历史v10.docx》由会员分享,可在线阅读,更多相关《HDS高端存储系统发展历史v10.docx(27页珍藏版)》请在冰豆网上搜索。
![HDS高端存储系统发展历史v10.docx](https://file1.bdocx.com/fileroot1/2023-1/27/fab300e9-706e-4fc7-be0d-be4f52279cb1/fab300e9-706e-4fc7-be0d-be4f52279cb11.gif)
HDS高端存储系统发展历史v10
HDS高端存储系统-发展历史-v10
HDS高端存储系统发展历史
CACHE成对设计,实现了自动负载均衡,保证了无瓶颈等待。
第四使用智能管理,保证NV-CACHE中的数据随时在处理完后进行写送工作,而不是等写满CACHE分区后再写送。
另外,HDS9910仍采用数据CACHE与控制指令CACHE分开,保障了用户购买的CACHE100%用于数据读写,这是日立公司产品与其他厂家的区别。
1.1.1可易扩展的最大存储系统
9900系列中的9910存储产品,是目前全球存储产品中最大存储产品,其内部可放置48个物理盘包,总裸容量在使用72GB盘包可达到35TB,而且可在不停机带电情况下进行连续升级、扩充与维修维护。
1.1.2不停机的微码升级与7´24´365运行标准
9900系列产品在7700系列产品基础上,再次使用FlashMemory芯片技术与理念,仍为全球在微码升级过程中不需要停机工作并真正做7x24x365天运行标准。
1.1.3开放架构
HDS9910除了在硬件上提供高速大规模存储,数据连续可用性以及世界领先的可管理性与可扩展性外,该系列产品可连接与支持开放系统,如HP-UX,IBMAIX,SUNSolaris,Linux,Netware,WindowsNT/2000以及许多其他操作系统,为处理超大型数据库或数据仓库提供了一个更好的存储环境。
1.1.4丰富的软件功能
9900系列产品在软件方面提供给用户很多的选择,其中包括系统资源管理与监控、远程备份与快拷、数据交换与路径管理与平衡,区域划分与安全管理,这些软件工具方便了用户,特别是其Nano-RemoteCopy与ShadowImage远程异步方式备份与快照功能,被业界公认是目前全球最好、最安全的异步远程备份方式。
1.2HDS9900V:
2002年:
第二代无阻塞交换体系架构
HDS公司于是2002年5月7日发布了基于HDS9900和第二代HI-STAR全光纤交换结构的高端智能存储系统HDS9900V系列产品。
在HDS9900V系列中包括两个型号的产品:
HDS9980V和HDS9970V,其中9980V最大管理1024块盘包和9970V最大管理128块盘包,HDS9980V由1个磁盘控制器柜和外接1至4个磁盘阵列柜组成。
9900V产品在以下几个方面进行了增强:
1.2.1HDS9970V产品
系统支持4块到128块盘包
–36GB1.5万转/每分钟(系统最大裸容量4.6TB)
–72GB1万转/每分钟(系统最大裸容量9.2TB)
系统支持8、16、24条Fibre、FICON或ESCON通道。
系统内部HI-STARⅡ型,带宽为7.9GB/S
1.2.2HDS9980V产品
系统支持8块到1024块盘包
–36GB1.5万转/每分钟(系统最大裸容量36.8TB)
–72GB1万转/每分钟(系统最大裸容量73.7TB)
系统支持8、16、24、32、64条Fibre、FICON或ESCON通道。
系统内部HI-STARⅡ型,带宽为15.9GB/S
1.2.3HDS9900V产品特点
1. 系统内部带宽
HDS9900V系列产品的内部架构采用第二代HI-STAR体系结构。
第二代HI-STAR体系结构与第一代(HDS9900系列产品采用,包括:
HDS9960、HDS9910)相比,在系统的整体性能上具有极大的提高。
HDS9970V产品的带宽可达到7.5GB/S,HDS9980V产品的带宽可达到15.9GB/S。
而HDS9910的带宽为3.2GB/S,HDS9960的带宽为6.4GB/S,新一代HI-STAR体系结构的带宽几乎为上一代产品的3倍。
2. 系统内部处理器的能力
HDS9900V系列产品中的前端与主机的连接通道控制器以及后端与磁盘阵列连接的控制器中的处理器也进行了升级更新。
新的处理器采用64位的MIPS处理器,其中前端与主机连接的处理器为200MHZ主频,后端接磁盘阵列的处理器为160MHZ主频,它的处理能力为HDS9900系列产品中处理器能力两倍以上,HDS9900系列产品所使用的处理器为32位的80MHZ主频的i960处理器。
由于处理器能力的提高,HDS9900V系统内部的每条光纤通道的带宽由200MB/S提高到332MB/S。
3. 系统超大容量
HDS9900V系列产品的最大容量也提高了很大。
目前,HDS9900V产品支持36GB(转速15000/分)、72GB(转速10000/分)两种磁盘类型,在今年的第三季度可以支持144GB(转速10000/分)的磁盘。
HDS9980V产品可装载到1024块物理盘,HDS9970V产品可装载到128块物理盘。
这样,在目前状况下(使用72GB的盘包),HDS9980V产品的最大容量为75TB,HDS9970V产品的最大容量为9TB。
4. 更灵活的RAID保护技术
HDS9900V系列产品对RAID保护技术也进行的增强与灵活选择。
在RAID0+1保护方式下,一个RAID组可以由4块或8块物理盘组成2D+2D或4D+4D,这样可以达到更高的性能。
在今年的第三季度,HDS9900V将支持由8块物理盘组成的采用RAID5保护方式的RAID组(7D+1P),这样可以极大的提高磁盘的利用率并可同时也提高了性能。
5. 逻辑虚拟端口功能可以支持更广泛和更灵活的连接性
HDS9900V系列产品通过新增加的逻辑虚拟端口软件定义功能,可支持系统更广泛更灵活的连接性,即在原有的多物理通道支持多操作系统主机平台连接的基础上,通过在物理端口上定义多个虚拟端口(最大为128个)更支持在同一个物理通道上的多操作系统主机平台的连接,该功能为用户在多操作系统环境下的连接配置系统端口节省了投资,不需要为每个操作系统在存储系统上都配置相应通道接口。
同时HDS9900V系列产品的通道端口带宽的标准配置为2Gb/S。
以上特点是其他公司产品所没有的,并成为存储业界的新标准。
1.3HDSNSC55:
2004年:
第三代无阻塞交换体系架构
1.3.1HDSNSC55存储产品介绍
1.3.1.1
物理架构HitachiTagmaStore
网络存储控制器NSC55是一种机架式设备,符合企业的成本要求。
它采用了HitachiUniversalStarNetwork™交换架构,提供由业内领先的HitachiTagmaStore通用存储平台带来的,经过验证的企业级功能:
外部存储虚拟化、逻辑资源分区和通用复制。
全光纤交换式内部体系架构HDSNSC55为HDS公司的第三代全光纤交换式企业级磁盘存储系统,内部仍然延续了HDS的CrossBar的交换式结构(通过CacheSwitch,实现前端主机接口控制器、后端磁盘通道接口控制器数据到Cache的数据快速交换),采用了Hitachi自主研发Hi-StarIII交换芯片,具有更高的数据交换能力,因此可以提供更高的内部带宽。
正是因为这样的传承,NSC55为用户带来了前所未有的性能、可用性和可靠性,以及先进的存储管理和数据复制功能。
用户可以把各种异构存储系统整合为一个虚拟池,通过一个中央控制台,使用一套通用的工具进行管理,从而简化存储环境,最大限度地利用现有资源,降低总体拥有成本。
内部逻辑示意NSC55之所以具备了强大的硬件性能,是与其内部先进的信息通道分不开的,这就是第三代通用星状网络(USN,UniversalStarNetwork)光纤交换架构,它在大幅提高处理性能的同时也具备强大而高效的连接能力。
从而使NSC55能成为通用存储平台的关键基础。
HDSNSC55的内部架构就是第三代通用星状网络(USN,UniversalStarNetwork)光纤交换架构,它在大幅提高处理性能的同时也具备强大而高效的连接能力。
灵活的RAID6、RAID5和RAID0+1组合NSC55支持的RAID方式包括2D+2D和4D+4D的RAID0/1以及3D+1P和7D+1P的RAID5和6D+2P的RAID6。
用户可选择上述一种或多种RAID方式来配置NSC55。
HDS存储产品支持各种RAID技术混用,在单一系统内部同时支持RAID10,RAID5(3D+1P),RAID5(7D+1P),RAID6(6D+2P)同时混用,而且由于领先的技术,各种RAID技术的性能相差不大,提供用户最佳的配置灵活性,用户可以根据业务需求、磁盘利用率、系统运行的安全性、性能等因素灵活配置磁盘。
HDS存储产品独特的RAID6技术能够保证同一个RAID组内,同时有2块磁盘发生故障时,还能够保证数据不丢失。
RAID6是通过两重校验实现的RAID方式,当同一个RAID组内2块磁(6D+2P)的RAID方式的安全性比RAID10和RAID5要高,磁盘利用率达到75%,比RAID10的50%高,与RAID5(3D+1P)相当。
目前由于单个磁盘的容量越来越大,目前的SATA盘已经能够达到500GB,磁盘故障后,热备盘顶替的时间越来越长,在热备盘顶替的过程中,同一RAID组中另一块磁盘出故障的概率也变大了,所以,为了保证存储系统的高可靠性,RAID6渐渐走上了历史舞台,渐渐被越来越多的客户采用。
逻辑虚拟端口功能支持更广泛和更灵活的SAN连接性HDSNSC55系列产品通过新增加的微码功能率先实现逻辑虚拟端口软件定义功能(HSD),可支持系统连接主机更广泛更灵活的SAN连接性,即在原有的多物理通道支持多操作系统主机平台连接的基础上,通过在单个物理端口上定义多个虚拟端口(最大为128个)来支持在同一个物理通道上的不同操作系统多主机平台的连接,该功能为用户在多操作系统环境下的连接配置系统端口节省了投资,不需要为每个操作系统在存储系统上都配置相应通道接口,大大降低用户的投资(TCO)。
存储产品不停机维修、升级与扩容设计HDS存储产品的所有部件均可热插拔和不停机进行更换、扩容和不停机地微码升级。
当微码出现问题时可以自动不停机地返回旧版本并可不停机地加入微码的Patch。
在这里特别强调的是上面提到的“不停机”是指用户业务系统不停机,是7×24运行的更高层次保障。
主动的全局热备技术保障数据安全RAID5和RAID6等具有冗余数据保存的RAID技术能够保证在RAID组中有1个磁盘损坏的情况下数据不丢失,RAID6的技术可以保证同一个RAID组中同时2块磁盘损坏的情况下数据不丢失。
但为了保证数据安全通常阵列系统厂商都支持动态备盘技术。
使用动态备盘技术在RAID组中有1个磁盘损坏的情况下可以对系统性能影响比较小的情况下恢复损坏磁盘上的数据。
1.3.1.2动态备盘技术
在某个时刻一个RAID组中的一个磁盘发生错误的数量超过系统定义的错误日志指标后,盘阵系统微码会自动启动动态备盘将有错误的磁盘上的数据复制到全局动态备盘上,在这个过程中不需要通过其它磁盘上的数据进行XOR计算。
因此整个RAID磁盘组的性能影响降到最低。
在完成动态备盘复制后进行错误磁盘更换时,数据将从动态备盘上拷贝回更换的磁盘上也同样不用进行XOR计算。
当错误磁盘不能够进行读写操作时,盘阵的系统微码不能进行动态备盘操作,此时系统会通过CorrectionCopy的方法进行数据恢复.
1.3.1.3CorrectionCopy操作
可以看到,虽然在进行CorrectionCopy时服务器依然可以进行正常大I/O操作,但是由于RAID组中的所有磁盘都要参与XOR计算因此性能会非常差。
HDS公司深刻认识到数据对用户的重要性,因此在微码中对磁盘错误监测有非常严格的要求,在磁盘只有非常微小的错误时就会启动动态备盘;因此HDS公司对磁盘的品质要求也是非常苛刻的。
主要技术指标用户因此可以在新的框架内部署应用,充分利用现有投资并使之增值,使IT和业务计划更加紧密地结合。
作为HDS的ApplicationOptimizedStorage™(面向应用优化的存储)解决方案不可分割的一部分,NSC55为在开放系统和大型机环境中的各种存储满足应用需求奠定了基础。
技术优势·提供企业级嵌入式虚拟化功能
·内部容量可扩展为72TB
·通过一个控制台能够管理16PB的内部和外部存储
·以一种对用户透明的方式,实时调整并平衡工作负荷
·允许为各种应用创建8个专用虚拟存储系统、并配给专用容量、高速缓存和端口来保证服务质量
·支持异构多平台连接性:
光纤通道、IBMESCON®、FICON®、NAS和iSCSI
·提供一套全面的存储管理服务,包括以应用为中心的存储域管理
·实现在异构存储层面之间透明有序地移动数据
·使用HitachiUniversalReplicator(通用复制)软件支持异构数据复制
·利用第三代UniversalStarNetwork架构
·提供企业级功能,符合国内大中型企业数据中心的需要
1.3.1.4HDSNSC55产品软件功能介绍
ResourceManager-系统资源管理、性能监视套件
LUNExpansion(LUSE)-LUN卷容量扩展软件
SANTinNel&HSD-存储区域网安全管理软件
GraphTrack-性能监控软件
FlashAccess-逻辑盘常驻缓存,快速存取软件
HDLM-通道负载均衡与故障自动切换软件
ShadowImage-“业务连续性”解决方案
TrueCopy-数据远程容灾解决方案
HUR远程异步容灾软件
虚拟化、逻辑分区
增强的存储区域管理软件
1.3.2HDSUSP存储产品介绍
1.3.2.1HDSUSP存储系统内部架构
HDSUSP架构同样采用HDS久负盛名的高性能、无瓶颈的UniversalStarNetwork全光纤交换结构(第三代Hi-Star架构)。
Hi-Star全光纤交换式结构是HDS公司秉承了多年大型主机的设计理念,将众多大型主机中的成熟、高效的技术应用于存储系统之上:
在2000年推出了第一代Hi-Star全光纤交换式结构的高端存储系统――9900,该产品一经推出就受到广大高端用户的肯定,在存储业界竖立了高性能、高可靠性、高扩展性的高端存储系统形象。
在2002年HDS公司在原有Hi-Star结构基础上提高CSW的运算能力,增加内部通道数量和带宽,升级前后端控制器上的CPU,推出了基于Hi-StarII结构的9900V高端存储系统,该系统的性能、扩展性、可靠性等全面超过9900,成为HDS公司又一个成功的高端存储系统。
在2004年,HDS公司又在Hi-StarII结构的基础上,推出了第三代全光纤交换式体系架构――UniversalStarNetwork,并且基于该架构推出了具有划时代意义的HDSUSP超高端存储系统,该系统性能、扩展性等方面全面超越目前业界已有的高端存储系统,而且提供了全面的虚拟存储解决方案,使异构存储系统互联互通成为可能。
这种交换式结构的技术是提供了“点对点”、“无阻塞”的数据访问,如图所示,在交换式架构中,最重要的部件是缓存交换模块(CSW)。
通过CSW,主机接口控制器、数据Cache和磁盘通道控制器连接在一起,数据Cache与前后两端控制器之间都能够构成“点对点”的连接,实现并发通道数量最大,数据通道利用率最高。
通过使用交换式的结构,使HDSUSP磁盘存储系统具有了良好的扩展能力,前端的主机通道控制器、后端磁盘通道控制器和Cache都能够在线的、灵活的进行升级,从而降低了系统升级的投资。
存储系统并发处理能力越高,就意味着可以处理更多的应用系统读写请求,进一步提高整个系统的性能。
1.3.2.2Cache的设计
高端存储系统中除了要有高性能、高扩展性的结构外,Cache的设计将直接影响到存储系统的性能表现和可靠性。
首先,HDSUSP的Cache设计中采用了Cache写镜像技术,即将Cache板分别至于两个互为备份的控制区域内,在响应读操作时这两个控制区域中的Cache在是独立响应的;在进行写操作时,当数据写入任何一个控制区域中的Cache时,同时会在另外一个控制区域中的Cache中保留一份镜像数据,直到这些数据被写入硬盘。
这种设计一方面确保在Cache中的数据的安全可靠,无论哪一个控制区域中的Cache出现问题,另外一个控制区域中都保存着对方Cache中未写入硬盘的数据;另一方面在进行在线的Cache升级时,HDSUSP磁盘存储系统都能够支持便捷、快速的升级方式,做到升级时对系统影响时间最短。
其次,HDSUSP磁盘存储系统为了有效的提高读Cache的效率和减少Cache中的寻址时间,将数据Cache和控制Cache分离开来,独自承担不同的任务。
数据Cache中包含应用系统的读、写数据;
控制Cache中包含数据在数据Cache中的位置信息、逻辑卷信息、配置信息等
控制Cache中的众多信息中,数据的Cache位置信息非常重要,主机通道控制器通过获取这些位置信息缩短在数据Cache中的寻址时间,提高了数据访问速度;另外,如果控制Cache中没有主机要访问的数据的位置信息时,就说明该数据并没有在数据Cache中,此时控制Cache将向磁盘通道控制器发送请求,将该数据从硬盘写入至Cache,并且更新控制Cache中的位置信息。
我们试想一下,如果没有控制Cache,所有的I/O操作请求都集中在Cache中处理,Cache越大,寻址时间越长,最终导致系统性能下将。
1.3.2.3RAID保护方式
磁盘存储系统最基本的功能就是保存数据,自从80年代初RAID技术产生以来,使用RAID技术进行磁盘的容错保护就成为磁盘存储系统的一个工业标准。
HDS公司在设计其第一代高端存储系统时就已经采用了复合工业标准的RAID技术,并且一直将这一技术应用于随后推出的各个存储系统中。
在HDSUSP磁盘存储系统中,支持的RAID方式有0+1、5、6。
HDSUSP系列产品对RAID保护技术也进行的增强与灵活选择。
在RAID0+1保护方式下,一个RAID组可以由4块或8块物理盘组成2D+2D或4D+4D,这样可以达到更高的性能。
同时HDSUSP还提供由4块或8块组成的物理盘支持RAID5保护方式下的3D+1P、7D+1P,其中7D+1P的RAID5方式可以极大的提高磁盘组的利用率(87.5%),节约了盘组投资并可同时提高大文件处理方式的性能,6D+2P的RAID6方式主要是针对使用300GB硬盘,以提高300GB硬盘RAID组的数据安全性。
1.3.2.4维护方式
一直以来存储系统的管理就是一个长期困扰用户的一个难题,尤其是高端存储系统,很多厂商都建议用户购买更多的原厂服务,请厂家的工程师进行维护与管理,这样虽然用户的维护人员管理工作减轻了,但是管理成本却大幅度增加。
需要注意的是,这种管理方式通常很难满足用户根据业务需求随时对存储系统进行调整,延误了业务系统上线时间。
HDSUSP磁盘存储系统提供的管理方式非常灵活、简便,通过图形界面化的管理,用户通过培训后,自己可以对存储系统进行有效的管理,包括创建RAID组,划分LUN,绑定主机系统等方方面面的工作,即节省了管理成本,加速了存储系统适应业务变化的需求,同时能够提高用户系统管理员的维护水平。
1.3.2.5USP与异构存储设备的连接能力
HDSUSP通用存储平台通过存储虚拟化的技术,可以实现将不同厂商的存储系统集合到同一个存储池中。
HDSUSP存储平台内部的资源为内部存储资源,与之相连的其它存储设备上的资源是外部资源。
通过该功能,可以使用统一的管理平台实现对内部和外部存储资源的统一管理,统一分配,可以按照应用系统的性能要求分配相应的存储资源。
从主机的角度看,内部存储资源和外部存储资源功能完全相同,而内部和外部存储资源之间的数据交换可以通过存储系统本身的数据复制和数据迁移软件来完成。
1.3.2.6HDSUSP通用存储平台的逻辑分区技术
HDS在通用存储平台上引入了逻辑分区的概念,这也是目前在存储系统中唯一的技术。
通过这个技术,你可以对通用存储平台进行逻辑划分,最大可以32个逻辑虚拟存储系统。
每个虚拟存储系统都拥有独立的主机通道端口、CACHE、磁盘等资源。
在通用存储平台和与之相连的外部存储设备中,通过逻辑分区功能可以使得应用系统的需求和分配给该应用的资源得到合理的调度和匹配,从而保证应用服务质量。
1.3.2.7系统超大容量与在线扩容
HDSUSP通用存储平台的最大内部容量可达到332TB,外部容量可以达到32PB。
目前,HDSUSP产品支持72GB(转速15000转/分)和146GB300GB(转速10000转/分)三种磁盘类型。
HDSUSP产品可装载到1152块物理盘,是目前全球最大的磁盘存储系统。
同时,HDSUSP系列产品可以支持在线的升级能力,即低型号的产品可以升级到高型号的产品。
这对用户的投资保护非常重要。
1.4HDSUSPV:
2007年:
第四代无阻塞交换体系架构
1.4.1HDSUSPVM的产品介绍
1.4.1.1HDSUSPVM存储系统内部架构
HDSUSP架构同样采用HDS久负盛名的高性能、无瓶颈的UniversalStarNetwork全光纤交换结构(第四代Hi-Star架构)。
Hi-Star全光纤交换式结构是HDS公司秉承了多年大型主机的设计理念,将众多大型主机中的成熟、高效的技术应用于存储系统之上:
在2000年推出了第一代Hi-Star全光纤交换式结构的高端存储系统――9900,该产品一经推出就受到广大高端用户的肯定,在存储业界竖立了高性能、高可靠性、高扩展性的高端存储系统形象。
在2002年HDS公司在原有Hi-Star结构基础上提高CSW的运算能力,增加内部通道数量和带宽,升级前后端控制器上的CPU,推出了基于Hi-StarII结构的9900V高端存储系统,该系统的性能、扩展性、可靠性等全面超过9900,成为HDS公司又一个成功的高端存储系统。
在2004年,HDS公司又在Hi-StarII结构的基础上,推出了第三代全光纤交换式体系架构――UniversalStarNetwork,并且基于该架构推出了具有划时代意义的HDSUSP超高端存储系统,该系统性能、扩展性等方面全面超越目前业界已有的高端存储系统,而且提供了全面的虚拟存储解决方案,使异构存储系统互联互通成为可能。
在2007年,HDS公司推出了第四代全光纤交换式体系架构――UniversalStarNetwork,并且基于该架构推出了具有划时代意义的HDSUSP超高端存储系统,该系统性能、扩展性等方面全面超越目前业界已有的高端存储系统,而且提供了全面的虚拟存储解决方案,使异构存储系统互联互通成为可能。
这种交换式结构的技术是提供了“点对点”、“无阻塞”的数据访问,如图所示,在交换式架构中,最重要的部件是缓存交换模块(CSW)。
通过CSW,主机接口控制器、数据Cache和磁盘通道控制器连接在一起,数据Cache与前后两端控制器之间都能够构成“点对点”的连接,实现并发通道数量最大,数据通道利用率最高。
通过使用交换式的结构,使HDSUSP磁盘存储系统具有了良好的扩展能力,前端的主机通道控制器、后端磁盘通道控制器和Cache都能够在线的、灵活的进行升级,从而降低了系统升级的投资。
存储系统并发处理能力越高,就意味着可以处理更多的应用系统读写请求,进一步提高整个系统的性能。