未名一号
型号:联想深腾X8800;试运行日期:2017年09月26日;正式上线日期:2018年01月03日;CPU计算节点LINPACK测试效率:92.59%。
一、硬件环境
1. 节点配置
节点类别 | 型号 | 主要规格 | 节点数 |
CPU 节 点 | NeXtScale nx360 M5 |
2*Intel Xeon E5-2697A V4,128G | 140 |
2*Intel Xeon E5-2697A V4,256G | 51 | ||
2*Intel Xeon E5-2697A V4,512G | 5 | ||
GPU 节 点 | X3650 M5 | 2*Intel Xeon E5-2643 V4,256G,2* NVIDIA Tesla P100 | 10 |
KNL 节 点 | KNL | Intel Xeon Phi7250,192G | 8 |
四路胖节点 | X3850 X6 | 4 * Intel Xeno E7-8867V4,512G | 1 |
八路胖节点 | X3950 X6 | 8 * Intel Xeno E7-8867V4,4096G | 2 |
合计 | 每个节点均配备240GB到480GB SSD硬盘,双口千兆,Intel OPA Single-port PCIe 3.0 x16 HFA | 227 | |
登 录 节 点 | X3650 M5 | 2*Intel Xeon E5-2690A V4,128G | 2 |
管 理 节 点 | X3650 M5 | 2*Intel Xeon E5-2690A V4 , 256G | 4 |
存 储 节 点 | X3650 M5 | 2*Intel Xeon E5-2690A V4 , 256G | 4 |
2. 节点性能
节点类别 | 单核主频 | 单节点核心数 | 单周期指令执行数 | 节点数 | 理论峰值/GFlops | |
CPU节点 | 2.6GHz | 32 | 16 | 196 | 260915.2 | |
GPU/CPU | 3.4GHz | 12 | 16 | 10 | 6528 | |
GPU/GPU | 1328MHz | 1792 | NA | 10 | 94000 | |
KNL节点 | 1.4GHz | 68 | 32 | 8 | 24371.2 | |
四路胖节点 | 2.4GHz | 72 | 16 | 1 | 2764.8 | |
八路胖节点 | 2.4GHz | 144 | 16 | 2 | 11059.2 | |
登录/管理节点 | 2.6GHz | 28 | 16 | 6 | 6988.8 | |
存储节点 | 2.6GHz | 28 | 16 | 4 | 4659.2 | |
合计 | 237 | 411286.4 | ||||
计算节点:227个,管理节点:10个、CPU核心:7032个、KNL核心:544个、GPU卡:20块 |
3. 存储配置
型号 | 主要规格 | 套数 |
联想GSS24 |
2*X3650M5 4*58*6TB NL SAS,1392TB 4*2*200GB SSD,1600GB |
2 |
存储容量合计:2784.8 TB,聚合读带宽:58GB/s,聚合写带宽:38GB/s |
二、分区设置
分区名 | 单节点规格 | 数量 |
---|---|---|
C032M0128G | 32核、128G内存(申请一核心,可用大约4G内存) | 140 |
C032M0256G | 32核,256G内存(申请一核心,可用大约8G内存) | 51 |
C032M0512G | 32核,512G内存(申请一核心,可用大约16G内存) | 5 |
GPU | 12核,256G内存,2块GPU卡 </br> 申请GPU资源时,请以1块卡配6个CPU核心的方式进行,避免额外费用 | 10 |
具体可用分区通过以下指令查询,以下查询结果为可用分区,以及分区中允许的QOS:
sacctmgr show ass user=`whoami` format=partition%15,qos%15
三、QOS设置
QOS | 内容 |
---|---|
low | 优先级:100 \ 最大运行时长:5天 \ 最大可提交作业:100 \ 最大可用核心数 :6400 |
normal | 优先级:500 \ 最大运行时长:5天 \ 最大可提交作业:100 \ 最大可用核心数 :6400 |
high | 优先级:1000 \ 最大运行时长:5天 \ 最大可提交作业:100 \ 最大可用核心数 :6400 |
QOS具体情况可通过以下指令查询:
sacctmgr show qos format=name,Priority,MaxWall,MaxJobsPU,MaxTRESPA
作业优先级越高,作业越优先进行计算。