《HP 高性能计算系统技术方案建议书》由会员分享，可在线阅读，更多相关《HP 高性能计算系统技术方案建议书（49页珍藏版）》请在金锄头文库上搜索。
1、 *高性能计算系统方案建议书高性能计算系统技术方案建议书中国惠普有限公司2012/3/23目录第一章 概述31.1 高性能计算环境发展的趋势31.1.1 更高、更全面的性能要求31.1.2 向通用化方向发展41.1.3 更加严格的预算约束41.1.4 使用商品化部件51.2 高性能计算应用的特点51.3 高性能计算主机性能评价体系6第二章 设计方案92.1系统设计原则92.2总体方案结构102.3 SMP计算服务器方案122.3.1 CPU内存配置数量计算122.3.2 SMP计算服务器型号及配置132.3.3 基于EPIC的安腾芯片技术152.3.4 高性能计算环境HP-UX 11i TCO
2、E182.3.5 计算任务提交及管理192.3.6 HP rx8620计算服务器的特点和优势202.4 Cluster计算集群方案212.4.1 HP Cluster计算集群结构212.4.2 Cluster节点系统配置242.4.3 节点互连、管理和用户网络262.4.4 Cluster计算集群节点管理272.4.5 Cluster计算集群作业管理282.4.6 HP Cluster计算集群的特点和优势292.5高性能计算外接存储需求分析302.6 HP方案的优势31附件 HP的HPC应用及成功案例331 HP的基础研究和国防研究HPC解决方案352 HP面向计算机辅助工程 (CAE)的HP
3、C 解决方案382.1 HP基于网络的一体化和虚拟化CAE解决方案382.2 HP全面和丰富的CAE应用软件402.3 HP 面向CAE的HPC解决方案在中国国内的应用422.4 HP 面向CAE的HPC解决方案的成功应用实例43第一章 概述HP公司非常荣幸能为高性能计算中心系统建设提出建议。作为全球最大的计算机厂商之一，HP公司具有一流的产品、技术和服务。在本方案建议书中，HP公司推荐了先进的系统建设方案，考虑了系统的实用性、高可用性、安全性、可管理性以及灵活扩展能力。HP公司凭借先进的技术和出色的支持服务，相信通过双方的合作，可使高性能计算中心系统项目顺利实施，从而为用户提供一个健壮、安全
4、、高可用的运行环境，并进一步建立长期的友好合作关系。高性能计算系统是提高一个科研机构研究水平的重要基础设施，也是一个国家科技与经济实力的标志。它不仅是一个高速处理的计算机系统、更重要的是在其之上运行的各种应用对科学领域产生非常深远的影响。20世纪90年代中后期以来，许多高性能计算应用领域越来越多地希望利用半导体和计算机技术发展的新成果通过更大规模、更精确的数值模拟和数字计算来进行新产品设计和科学研究，提高科学研究水平、厂商市场竞争力以至国家的综合国力。另一方面，人们也要求利用工业标准芯片等开放性的技术降低投资、加速开发，在规定经费预算和时间框架内完成规模越来越大的计算任务。高性能和高经济效益相
5、结合已经成为高性能计算领域最引人注目的发展趋势。1.1 高性能计算环境发展的趋势1.1.1 更高、更全面的性能要求高性能技术计算是利用数值模拟和数字技术方法探索和预测未知世界的技术。这一技术广泛应用于核武器研究和核材料储存仿真、生物信息技术、医疗和新药研究、计算化学、GIS、CAE、全球性长期气象、天气和灾害预报、工艺过程改进和环境保护等许多领域。近年来，随着研究的深入和竞争的加剧，各个领域越来越多地使用模拟的方法来解决科研和生产中的实际问题。模拟的模型越来越大、计算的精度越来越高、对超级计算机性能要求也越来越高。例如，在一个3维模型中，如果把从每个方向取100个分点增加取到1000个分点，对
6、计算机资源的需求将增加1000倍以上。高性能计算应用不仅规模越来越大，而且往往必须在规定的时间内完成任务否则就失去了计算的价值（如天气预报、传染病防治）。这就对计算机系统的计算能力、系统带宽、内存容量、存储设备和I/O吞吐能力以及应用软件的开发技术都提出了更高、更全面的要求。 1.1.2 向通用化方向发展过去人们一般把计算机应用分为科学计算、信息处理和自动控制等类型。其中，以信息处理为主的应用统称企业应用，是市场容量最大的应用领域。早期的企业应用与高性能计算应用有很大的差别，涉及的计算比较简单、使用的数据量也不大，对计算机系统的主要要求是能够支持大量用户（包括网上用户）进行事务处理如信息输入、
7、查询和统计等，而对于计算能力、存储容量要求也不高。因此，高性能计算应用往往使用与企业应用不同的系统，影响了产品批量的扩大。当前，人类正在从工业化社会进入信息社会，技术的持续创新、市场需求的瞬息万变、竞争空间的迅速扩大，要求企业采用Internet、电子商务、电子商务企业等现代化手段，来适应时代的发展。许多新型的企业应用对计算能力、存储容量和系统带宽的要求都越来越高、越来越迫切，高性能计算 应用和其他类型应用的界限也日益淡化。当前，几乎所有应用领域都需要使用能够提供高计算能力、系统带宽和存储容量的计算机系统，促使用户选择相同的系统满足各种类型的需求，为利用大批量、低成本的通用产品满足高性能计算应
8、用需求创造了有利的条件。1.1.3 更加严格的预算约束随着竞争的加剧和应用的普及，高性能计算不再是一个不惜工本的应用领域，许多项目的预算约束越来越严格。这就要求厂商生产全系列的产品满足不同规模应用的需求、更加可靠地保护用户原有投资、加速IT投资回报，而且也要求实现资源按需供应和更大范围的资源共享，推动了网格和公用服务等新的计算模式的发展。1.1.4 使用商品化部件为了促进高性能计算广泛应用必须降低成本，否则很难为更多的用户所接受。由于高端的高性能计算系统（特别是超级计算机）需要使用许多计算节点和互联设备等部件，因此必须保持每个部件的低成本。早期的超级计算机系统使用专门定制的处理器和互联设备等部
9、件价格非常昂贵。以后，Cray Research 公司的T3D 和 CRAY T3E 开始使用商品化的 Alpha 处理器。当前商品化处理器和服务器性能日益提高、价格也日趋下降，为利用它们建立高端和超级计算机系统提供了良好的基础。为此，美国政府还推出了ASCI 计划，力图降低超级计算机系统的成本，其主要途径是尽可能采用商品化市售(COTS)硬件和软件部件，把力量集中在发展主流计算机工业不能有效地提供的专门技术。目前已经很少再有厂商使用专门的部件如向量处理器来建立超级计算机系统。今后的发展趋势是在高端和超级计算机系统中尽可能普遍地采用商品化和大批量的工业标准部件，包括处理器、互联设备、I/O、存
10、储、操作系统、语言、编译程序、编程工具和应用软件。人们注意到，基于开放性IA32体系结构的Xeon和Pentium 4处理器的超级计算机已经在TOP500占有重要地位。新兴的Itanium处理器系列（IPF）必将以其开放性、大批量和64位寻址和处理能力，对超级计算机水平的提高产生划时代的影响，以远比32位体系结构时代高的性能和性价比来满足日益增长的需求。我们深信，通过采用HP的高性能计算系统 ，必将加速在高性能计算领域取得更加丰硕的科研成果。1.2 高性能计算应用的特点在传统意义上高性能计算应用是属于CPU和内存密集型的应用,它对所运行的计算机体系结构(超级计算机体系结构)提出了几个主要的要求
11、: 浮点计算能力(尤其是64位双精度浮点运算),内存带宽和内存容量及体系框架。所有这些因素都是相互关联的。高性能计算通常利用各种数学方程式来建立模型和模拟物理现象。随着各种模型越来越大，越来越复杂，数据集的规模也急剧增长。例如，一个100*100*100的栅格包含100万个元素，该模型仅占用32MB内存，如果此栅格的分辨率提高10倍，这一模型就变为1000*1000*1000，包含10亿个元素，此模型的原始数据将占用32GB的内存！因此不论是分布式内存还是共享式内存，要将此数据传输至内存中，由CPU处理，就需要高带宽，高容量，低延迟的体系结构，当然还需要强大的CPU进行计算。而超级计算机主要用
12、来处理这样庞大的工作负载。这样的负载所要求的超级计算机一定是采用快速的CPU，高性能的内存和I/O子系统，旨在实现最高的运算速度。同样这样的负载所要求的超级计算机还必须采用多级别并行处理技术，能够利用几十个甚至几千个处理器来处理一项任务；这样的并行处理技术也需要超级计算机要采用高性能的互连设备和系统设计，以较高的成本去换取最高的性能。1.3 高性能计算主机性能评价体系衡量主机系统或处理器计算处理能力的测试体系(BenchMark)也有多种，如SPEC、Linpack等, 尤其是通过Linpack值更可以衡量一个主机系统或一个处理器芯片的实际运算能力, 而不仅仅是虚的理论峰值能力。 过去，人们使
13、用系统能够达到的执行指令最大速率如每秒执行百万指令数/浮点操作数(MIPS/MFLOPS)来量度计算机硬件性能。但是，这些量度指标的实用价值十分有限，它们只能给出理论上最大的性能，并没有全面反映计算机系统的实际性能如内存带宽、内存延迟和I/O性能等。此外，硬件性能量度和系统体系结构都是非标准的，使得人们很难使用它们作为服务器选型的性能指标。因此，出现了计算机系统性能基准测试的概念，即由某些中立的非盈利机构开发出一组经过精心统筹设计和组合的程序，来量度计算机系统运行这组程序的性能指标。此类程序一般称为基准测试程序。不同的计算机系统都运行同一组基准测试程序，就可以相对客观地比较计算机系统的性能。目
14、前有许多专门设计基准测试程序和管理各种计算机系统基准测试指标的机构，其中最著名的是SPEC和TPC。 基准测试可以分为三类： 1) 系统基准测试指标：用于测试计算机各子系统的性能，其中主要有： n SPEC CPU2000 用于处理器子系统的指标； n McCaplin Stream用于测试内存带宽指标； n TPC-C用于测试在线事务处理指标性能指标； 2) 标准应用基准测试指标：用于测试计算机系统执行某种标准的应用的性能指标，其中主要有： n SPEC WEB 99用于测量计算机执行 Web应用的性能指标；n SPEC MAIL2000 用于测量计算机执行电子邮件应用的性能指标； n SP
15、EC JBB2000，SPEC JVM98 用于测量计算机执行JAVA 应用性能指标； n Linpack用于测量计算机进行线性代数计算的性能指标（也常作为测量计算机浮点计算速度的基准测试指标）； n SPEC HPC96 用于测量计算机执行高性能计算应用的性能指标； n SPEC SFS97 用于测量计算机执行网络文件系统应用的性能指标；n TPC-D专门用于测量计算机执行数据仓库应用的性能指标； n SPEC glperf 和 SPEC viewperf 专门用于测量计算机执行图形和图象显示方面应用的性能指标；3) 实际应用基准测试指标：许多重要的独立软件开发商(ISV)都制订了计算机系统运行本公司开发的软件产品的基准测试指标。例如，在数据库应用方面Oracle、Informix、 Sybase公司的基准测试指标；在企业应用方面SAP、SAS、PeopleSoft、Baan等公司的基准测试指标；在高性能计算方面运行Amber、CHARMm、Fluent、LS-DYNA、MARC、ANSYS等著名应用软件的指标等； 一般地说，系统基准测试指标测试的计算机子系统的性能，而其他两类基准测试指标则主要测试计算机执行某种或某个特殊应用的性能。基准测试指标在用户服务器选型工作中具有重要的作用，许多用户都根据它
