QE专题

QE GWW 内存估算:先看参数规模

实际运行memory_pw4gww七组输入,展示基维数、Lanczos参数和MPI数对旧GWW内存模型的影响,配套输入、数据和图。

更新于 2026-11-17约 4 分钟阅读按任务与环境选择适用配置
阅读本篇目录

运行GWW前,除了电子结构收敛,还要考虑极化率基、Lanczos参数和并行划分引起的内存增长。QE 7.6附带的 memory_pw4gww.x 可以快速代入一组尺寸参数,观察旧GWW分配模型的估算趋势。

下载七组输入、实际输出、CSV和绘图脚本。程序来自 qe/7.6-8173m,主要编译环境为Intel oneAPI 2024.2、Intel MPI 2021.13与MKL。本例每次只运行一个串行工具进程,输入里的MPI任务数是公式参数,不会真正启动对应数量的计算进程。

1. 先看配套结果#

unzip qe-GWW-memory-wave1301-*.zip
cd qe-GWW-memory
bash read.sh
bash plot.sh
cat analysis/QE-GWW-memory.csv

实际七组内存公式输入及输出

条件 公式输出,按MiB解释
NUMPW=1000、NUMT=200、N_SET_POLA=4、NSTEPS=20、MPI参数1 151.21460
其余不变,MPI参数4 58.40302
其余不变,MPI参数16 35.20012
MPI参数4,NUMPW增至2000 162.54430
MPI参数4,NUMT增至400 93.99414
MPI参数4,N_SET_POLA增至8 91.97235
MPI参数4,NSTEPS增至40 88.92059

这些是用于解释公式的尺寸参数,并非某种材料的实测内存。没有重新计算SCF、GW,也没有测量进程RSS。

2. 最短的手动调用#

module load qe/7.6-8173m
cat > memory.in <<'INPUT'
1000
200
4
20
4
INPUT
memory_pw4gww.x < memory.in > memory.out
cat memory.out

输入顺序必须与提示一致,每行一个整数:

NUMPW
NUMT
N_SET_POLA
NSTEPS_LANCZOS_POLA
N MPI TASKS

NUMPW 对应GWW极化率基的维数,不是原子数,也不能直接用某个SCF平面波数代替。其余维数和Lanczos设置也应来自相匹配版本的GWW输入及生成数据;不要把电子数、能带数或节点数仅因数值相近就代入相应位置。

输出示例:

Required memory(MB): 58.40302

虽然程序标签写MB,源代码最后实际除以 1024²,因此本教程按 MiB 解释。1 MiB=1,048,576字节。

3. 为什么增加MPI参数后不会一直按比例下降#

用P、T、B、L、R依次表示上述五个参数。程序包括以下字节项:

4*P*T*B
8*P*T
8*P*L*B*T/R
8*P*P
4*T*T/R
8*P*T/R
16*P*P

将它们相加后除以1024²,得到打印值。第1、2、4、7项不随R减小;第3、5、6项带有R分母。因此MPI参数变大只能减少模型中的一部分项,不能把整个估算值机械地除以进程数。

配套基础参数的R无关项合计约27.46582 MiB,所以图中MPI参数从1增至16后,模型值虽然下降,仍高于这部分固定项。NUMPW 同时出现在平方项中,加倍可能比单纯线性增大更显著。

这是原程序的旧分配模型,不能从这张图推导出真实并行加速、MPI通信开销或整节点峰值内存。实际GWW还涉及其他数组、库、MPI缓冲区和不同阶段的分配行为。

4. 批量准备自己的输入#

bash prepare.sh
cat work-new/MPI4/input.txt
bash run.sh
bash read.sh --new

prepare.sh 建立新的 work-new,不覆盖参考结果;run.sh 逐个调用七组小型算术工具输入,不提交Slurm作业。已有输出时停止,避免覆盖。

配套读取脚本用同一版公式独立求和并整理CSV;改动尺寸参数后,也要更新 QUALIFICATION-PLAN.json 中对应参数,使表格和比较依据保持一致。不要把这七个固定示例数字作为其他体系的目标。

5. 如何用于实际作业准备#

先完成对应GWW工作流的小体系准备,确认实际的基维数和Lanczos设置,再把匹配的参数代入模型,观察哪些参数最容易推高内存。随后在自己账号下通过Slurm运行有代表性的小计算,结合实际作业记录评估资源,并留出合理余量。

程序使用旧的默认实数精度,部分表达式还包含默认整数中间运算;极大尺寸可能丢失精度或发生整数溢出。出现负值、不合理跳变或超大维数时,不应继续依据该输出选择资源。它适合作为理解本版GWW参数规模的辅助工具,不能作为实际峰值测量、调度器预留量或一定不会内存不足的保证。

实际计算流程参见GWW甲烷准粒子计算。公式依据为官方本版源代码 memory_pw4gww.f90。

需要根据你的体系选择资源?联系讨论计算需求。实际可用软件与权限,以当前账户和运行环境为准。

查看配图

放大后可滚动查看细节,按 Esc 关闭。

100%查看原图 ↗