联想深腾高性能服务器产品手册.doc

1、联想深腾高性能服务器产品手册联想深腾高性能服务器产品手册联想高性能服务器事业部2010年3月目录前言 联想与高性能计算4一、设计理念7二、系统概述81、深腾高性能服务器系统结构82、深腾高性能服务器产品系列：深腾7000/G9三、基础架构101、机柜102、供电模块133、视频切换154、液晶控制台175、液冷系统186、基础架构的技术标底20四、结点服务器211、万全机架式服务器212、深腾刀片服务器213、深腾GPU服务器21五、存储系统23六、互连系统241、InfiniBand互连241.1 24端口以下 - Qlogic 9024交换机261.2 48端口以下 - Qlogic 90

2、40交换机271.3 96端口以下 - Qlogic 9080交换机281.4 144端口以下 - Qlogic 9120交换机291.5 288端口以下 - Qlogic 9240交换机301.6 QLE7240 DDR HCA卡311.7 Qlogic InfiniBand产品技术标底312、Ethernet互连312.1 iSpirit 3224322.2、FWS648G342.3、FLS648、FLS648-STK352.4、模块化高性能Ethernet互连372.4.1、 FastIron SuperX - 204端口以下382.4.2 FastIron SX1600 - 384端口

3、以下392.4.3 模块化以太网交换产品技术标底41七、机群软件系统421、结点操作系统422、并行开发环境432.1 Intel C/C+编译器432.2 Intel Fortran编译器442.3 Intel MPI442.4 Intel MKL462.5 Intel IPP472.6 Intel VTune性能分析器472.7 Intel TBB线程构建模块472.8 Intel Thread Checker线程检查器472.9 Intel Trace Collector and Analyzer483、LCOMS 联想机群操作管理系统483.1 机群管理LCMS483.2 作业调度LJ

4、RS503.3 机群监控LCSM523.4 LCOMS技术标底544、并行文件系统554.1 LCFS的基本特性554.2 LCFS的技术标底56八、安装环境要求571、机房空间572、电源573、散热584、承重需求58九、服务591、安装与培训服务592、标准保修服务60十、重大项目介绍611、深腾7000超级计算机632、深腾7000G超级计算机643、深腾6800超级计算机654、深腾1800万亿次计算机675、深腾1800应用于F1威廉姆斯车队69前言 联想与高性能计算2001年10月，联想开始进军高性能服务器领域。之后，联想顺应国际主流技术发展趋势，以市场需求为驱动，吸收国内外最新

5、技术成果，进行了大量创新性研发，突破包括系统设计与优化、系统基础架构、系统软件等在内的一大批高性能服务器的关键核心技术，开发出一系列可扩展、易管理、好使用、稳定可靠的高性能服务器产品，并配备可满足用户个性化需求的行业解决方案，提供从系统层到应用软件层的全面解决方案和技术服务。2002年7月，联想研制成功“深腾1800”万亿次机群系统，安装在中科院数学与系统科学研究院。这是世界上第一个实际速度超过1万亿次的大规模机群系统。曾入选新华社2002年中国十大新闻及两院院士评选的2002年中国十大科技进展，并荣获2004年国家科技进步二等奖。 2002年末，另一套深腾1800大规模机群系统安装在中科院大

6、气物理所国家重点实验室。 2002年12月30日， 联想深腾1800战胜 IBM、HP等国内著名品牌中标大庆油田，使该油田第一次在国内实现三维叠前深度偏移地震资料处理。2003年，联想成功研制“国家网格主结点联想深腾6800超级计算机”，安装在中科院计算机网络信息中心。这是当时世界上 Linpack 效率（78.5%）最高的高端通用计算机，其组合查询性能名列世界当时世界所有大型服务器的第四位， 其典型应用MM5的测试结果在2004年3月列世界所有超级计算机的第一位。该机荣获2005年国家科学技术进步二等奖、2005年国家重点新产品奖、2004年信息产业重大技术发明奖。联想深腾6800自2004

7、年初在网络中心对外服务以来， 一直 7 X 24 小时稳定运行， 在双星计划、气候模式计算、油藏模拟、材料科学计算、流体力学计算等领域取得了150多项重要计算成果。联想深腾系列高性能计算机成为最早进入世界TOP500的一批国产计算机， 分列当时世界TOP500的第14、43、98 和 299名。 这是一个历史性的突破，联想深腾系列高性能计算机已成为国际知名国内主流的品牌。联想在推动高性能技术产业化方面取得了突破性进展，联想的高性能计算机广泛应用于许多关键领域，在国民经济和社会发展中发挥重要作用。目前， 机群已成为世界高性能计算机体系结构的主流，联想深腾1800、深腾6800和深腾7000为这一

8、趋势的形成做出了重要贡献。2002年8月初，世界上主流并行编程环境MPI-ch的发明人、美国阿贡实验室 William Cropps 参观联想深腾1800后写道：“We see the future of clustering computing”。 2007年，联想为F1的Williams车队成功地安装实施了1套8万亿次的高性能服务器，联想高性能服务器开始进军海外。联想作为国际奥委会TOP合作伙伴，负责为2006年都灵冬季奥运会和2008年北京奥运会信息系统提供服务器和存储产品。如今，联想服务器和存储产品在已结束的都灵冬季奥运会和北京夏季奥运会上实现了零故障运行。联想的产品和服务实力获得了都

9、灵和北京奥组委的高度评价。2008年12月4日联想集团对外宣布，联想已经成功研制出每秒实际性能超过百万亿次的高性能计算机“深腾7000”，“深腾7000”也由此成为入选该排行榜的第五台联想“深腾”系列高端超级计算机，它将落户中国科学院用于搭建网格计算平台。深腾7000全球排名第19位。联想“深腾7000”是世界上规模最大的一个结点无盘启动的机群系统，成功实现了基于1428个无盘结点的机群系统。同时，它也是世界上第一个实现了对所有硬件部件统一管理和监控功能的机群系统，实现了对机群系统内数千个计算、互连、存储等硬件部件的统一管理和监控。2009年4月17日，我国第一套单精度峰值超过每秒1000万亿

10、次浮点运算的超级计算系统，由联想集团与中科院过程所等单位共同研制成功并投入使用。其中，联想深腾7000G作为国内第一台超过两百万亿次的高性能加速计算机，为千万亿次超算系统提供了每秒205.3万亿次强劲有力的图形加速运算支持，联想深腾7000G的研制成功，再次展示了联想在高性能计算领域的深厚积淀，将国家科研、工程技术实力和竞争力推向了新的科技制高点，再次巩固了我国高性能计算强国的地位。联想在高性能服务器基础技术方面有着长期的积累，有齐全的产品线和严格的质量控制体系，为高性能计算机的研制和生产奠定了坚实的基础。在产品设计上，联想坚持用户导向的原则，同时结合对新技术的深入理解和消化吸收，始终遵循模块

11、化设计思想，在充分综合考虑各模块精密配合和整机系统合理整合的基础上，先设计出最佳性价比、最稳定的产品方案，然后对方案进行工程计算仿真，同时不断地结合验证性实验，最终才形成可行的开发方案，从而保证为用户在最短的时间里开发出最贴近的具有竞争力的产品。在研究开发上，联想建立了与国际接轨的两级研发体系，即公司级研发平台和各事业部研发中心。公司级研发平台由联想研究院、软件中心、板卡中心和工业设计中心组成。事业部研发中心隶属于各事业部，直接承担具体的专项技术开发工作。联想在高性能服务器技术上已突破并拥有了自己的核心技术，拥有自主知识产权的系统设计与优化技术、系统监控技术、系统管理技术、高可用和负载均衡技术

12、以及基础架构技术等关键技术，在高性能计算机系统技术方面已申请国家发明专利85项，其中，46项已获授权。在工程技术上，联想拥有针对服务器的部件及整机进行专业性测试的全套技术。部件测试包含外观、结构、功能、兼容性、可靠性、安全性、性能和环境8个方面的测试，以保证所有部件符合联想服务器技术特性和质量标准的要求，对服务器的核心部件如电源、内存，还建立了专业化的实验室，实现了部件的自动测试。如全球技术领先的自动电源测试实验室和自动内存测试实验室，国内功能最全面、技术最先进的系统测试实验室，以及高温实验室、电磁兼容检测实验室、噪音实验室、湿热实验室等等，所有产品需要在这些实验室中通过一系列的严格检测，只有

13、通过了这一系列的严格检测的服务器产品，才可以顺利出厂，提供给客户。联想始终严格执行国际标准的质量控制体系，是国内唯一通过ISO90002000版质量认证体系的服务器厂商。在技术服务与方案上，联想服务器应用方案中心拥有雄厚的技术力量，在硬件平台、操作系统、数据库、中间件、网络、存储、集群技术等方面有着多年的技术和经验积累，可以分别从不同的技术层面为用户提供有效的产品应用和方案支持服务。中心拥有先进的实验环境，包括方案集成实验室、性能评测实验室、数据中心、客户实验室四个部分，为用户提供方案开发、测试，方案移植、优化以及培训、咨询等服务，及时、快速、可靠地解决在用户系统在使用过程中所遇到的技术问题，

14、使客户的系统可以更加安全稳定地运行，以保障和促进客户业务的顺利开展并取得更大的成功。总之，通过多年的努力，联想在高性能计算机的设计、研发、工程、方案、服务方面已具备坚实的基础，具备了承担国家重大战略性项目和中科院信息化建设重大项目的实力。一、设计理念联想深腾高性能服务器在设计上严格遵循eDORAS3理念： e: easy to use（便于使用）：系统易于操作和控制，保持单一系统映象，方便用户使用。 D: easy to Deploy（便于部署）：实现系统自动安装、规模自动扩展、核心自动升级、软件包自动分发，提高部署效率，减少部署成本。 O: Open（开放）：服务器结构开放，接口标准，可与第

15、三方的软件产品和硬件设备互连互通和共存共容。 R: Reliability（可靠性）：服务器部件和系统可靠，减少出现错误的几率，提高系统无故障时间。 A: Availability（可用性）：系统故障可及时发现，自动或手动修复，降低系统平均修复时间。 S: Serviceability（可维护性）：降低系统维护的技术难度，方便系统维护，减少维护成本。 S: Scalability（可扩展性）：服务器的功能和性能均可随系统规模的增大而增强，可大可小，伸缩自如。 S: Security（安全性）：防止服务器软硬件的漏洞和后门，按需提升系统安全级别，保证系统安全。二、系统概述联想于2002年3月开始推出基于IA架构的高性能机群服务器。经过多年的技术积累，深腾高性能服务器解决了机群基础架构、机群远程控制、机群系统互连、机群单一映象管理、机群作业调度、机群并行文件系统等一系列技术难题，目前已获得54项专利授权。深腾高性能服务器采用了当今TOP500中的主流技术，如Cluster架构、Intel处理器、Linux操作系统、Ethernet或Infiniband互连等