存储资源
存储架构

AIStation平台使用华为DPC(Distributed Parallel Client)分布式并行客户端作为后端存储系统,它作为存储客户端运行在计算节点上,可同时连接多个存储节点,对上层应用提供标准POSIX和MPI-IO接口,以获得更好的兼容性和更优的性能。
优势1:DPC并行客户端支持支持MPI-IO,更好适配HPC生态
优势2:DPC并行客户端单客户端可连接多存储节点,单客户端、单流性能更高
优势3:DPC并行客户端的IO路径更短,客户端直接打散数据
优势4:DPC并行客户端负载均衡能力更优,IO级负载均衡
存储性能
读写性能
| 节点数 | Wite(MiB/s) | Read(MiB/s) |
|---|---|---|
| 1 | 13041 | 0490 |
| 5 | 55062 | 3914 |
| 10 | 114598 | 86357 |
| 20 | 215547 | 40452 |
| 50 | 272937 | 49231 |
| 100 | 269529 | 39375 |
iops性能
| 节点数 | Wite | Read |
|---|---|---|
| 1 | 444651 | 188394 |
| 5 | 1479884 | 862600 |
| 10 | 2543510 | 1917108 |
| 20 | 4849974 | 3638827 |
| 50 | 7912825 | 5245717 |
| 100 | 10071958 | 8582061 |
mdtest性能
| 节点数 | File creation | File stat | File read | File removal |
|---|---|---|---|---|
| 1 | 111373 | 551635 | 630209 | 86979 |
| 5 | 442197 | 2353586 | 2243375 | 315899 |
| 10 | 726037 | 4707264 | 4031472 | 540862 |
| 20 | 783964 | 9388048 | 9238753 | 731609 |
| 50 | 713123 | 21922473 | 11214082 | 674313 |
| 100 | 700855 | 44213875 | 24049485 | 333082 |