200万网格并行算力测试（OpenFOAM版本）

[heike256]

AMD Ryzen 5600G CPU，2x16GB 3200MHz内存
Windows 11 WSL2 with Ubuntu 20.04
OpenFOAM2112

# cores   Wall time (s):
4 416.83
2 488.85
1 1017.22

[heike256]

上海超算魔方III集群score队列，该队列仅允许提交小于32核的作业，所以只测试到了16核。单节点配置如下：
CPU：Intel,Gold 6142 2.6GHz
单节点内存：192.0GB DDR4
网络：Omni-Path,100Gbps
存储：ParaStor,300 5800TB
操作系统：Linux
作业管理系统：LSF 10.1

测试结果如下：

# cores   Wall time (s):
------------------------
16 138.15
8 203.86
4 333.54
2 651.75
1 1300.79

[lgw]

M1 MacBook Air 丐版
系统：macOS 13.0.1 真系统
OpenFoam版本：OpenFoam v2206

我是从链接：https://github.com/gerlero/openfoam-app/tree/v1.8.4
直接下载app使用的，运行的时候有警告，只有1个核的数据。

[cyberk]

CPU型号：AMD 霄龙 7763双路
系统：真系统 Ubuntu18.04
OpenFOAM版本：OpenFOAM-7
128 36.17
64 42.78
32 73.29
16 99.53
8 129.85
4 240.07
2 414.92
1 861.36

[cyberk]

CPU型号：AMD 霄龙 7763双路
系统：虚拟机 Ubuntu18.04
OpenFOAM版本：OpenFOAM-7
128 44.44
64 47.05
32 63.96
16 140.24
8 159.79
4 253.19
2 414.95
1 891.46

[cyberk]

CPU型号：Intel(R)  i7 12700
系统：真系统 Ubuntu18.04
OpenFOAM版本：OpenFOAM-7
20 284.15
16 286.09
8 211.63
4 267.82
2 361.69
1 618.32

[李东岳]

@heike256 为什么只能提交小于32核的作业呢？

[李东岳]

@cyberk 谢谢 7763好像两次数据不一样 12700表现平平

[cyberk]

@李东岳 李老师好，第一个7763是真系统跑的，第二个7763是虚拟机跑的。

[李东岳]

@cyberk 什么虚拟机可以跑128核啊？vmware这面不是限制最多16核？

[cyberk]

@李东岳 VMware vSphere，在服务器上使用的虚拟机

[李东岳]

我还不知道VMware vSphere 我这面服务器跑的都是普通的vmware 我让学生研究下

[heike256]

@李东岳 调度规则限制。魔方3分了两个队列score和snode，score适用于并行数不超过单个节点核数（32核）的小规模并行和串行任务，并行数超过单节点则需提交到snode队列，且必须调用整个节点。这个算例规模太小，就没测跨节点并行的效率。

[Timetheonce]

CPU型号：1135G7
系统：Ubuntu 22.04.2 LTS
OpenFOAM版本：OpenFOAM-10
4 766.951
2 687.98
1 897.375

[shawJ]

CPU型号：AMD EPYC 7302 （2）
系统：Ubuntu 20.04 LTS
OpenFOAM版本: OpenFOAM-v1906
32 77.91
16 104.34
8 142.72
4 273.18
2 528.45
1 1128.94

[heike256]

@shawJ 7302真是最适合openfoam的CPU了

[shawJ]

@heike256 是的，而且价格优美，7302*2+H11dsi板U套也是3K多，性价比之王

[文昌鱼]

龙芯平台的测试数据，以供参考。

CPU型号：Loongson-3A5000LL
系统：Loongnix GNU/Linux 20 (DaoXiangHu)
内核：Linux 4.19.0-19-loongson-3 (loongarch64)
OpenFOAM版本：OpenFOAM-v2206
4 902.14
2 1172.93
1 1993.66

linux内核 6.0版本之后会有原生的loongarch架构支持，等搞定系统以后再测一版。

[文昌鱼]

@文昌鱼 内核升级到6.3，编译器更新到gcc-13之后基本没有提升，硬件极限到此为止了，软件优化几乎没有效果。

[李东岳]

@文昌鱼 多谢反馈！你们这一套能换U不，如果能换U，我可以给你们找一套更屌的U，费用我来出，然后你们测试测试？