VTST专题

VTST时间统计:OUTCAR与压缩文件的读取

用真实Al表面计算日志演示tist.py,区分LOOP/LOOP+的CPU时间、逐文件平均和加权平均,并提供压缩OUTCAR的Python文本读取入口。

更新于 2026-11-15约 3 分钟阅读按任务与环境选择适用配置
阅读本篇目录

下载实际OUTCAR、原始统计输出、CSV与读取绘图程序(ZIP)。使用vtstscripts/1040。本例复用已完成Al(100)表面路径的三份OUTCAR,只做日志后处理,没有重跑计算或进行新的性能基准。

1 单个目录读取#

在含OUTCAR的目录中执行:

module load vtstscripts/1040
python3 "$VTSTSCRIPTS_ROOT/tist.py"

本例中间像01实际输出的两项主要数字为:

total ionic step time: 20.5998 sec
average electronic step time: 0.7248538461538462 sec

第一项累加OUTCAR的LOOP+:行,第二项是LOOP:各行的平均值。下面说明它们实际读取的列。

2 多份OUTCAR怎么放#

results/
├── 00/OUTCAR
├── 01/OUTCAR
└── 02/OUTCAR

在results/运行同一条命令。当前脚本读取根目录OUTCAR及直接下一级目录中的OUTCAR,不是任意深度的递归扫描;多级目录先整理一份副本。避免同一份数据同时以OUTCAR和OUTCAR.gz放在同一个目录,脚本会分别处理两者。

源像 离子步数 电子步数 LOOP+ CPU时间合计/s 平均LOOP CPU时间/s
00 16 187 217.5138 0.96966310
01 1 26 20.5998 0.72485385
02 16 187 175.6745 0.77078984

三份文件的LOOP+ CPU时间合计为413.7881 s。

从三份真实OUTCAR提取的CPU日志时间

3 这是CPU列,不是作业耗时#

真实日志行示例:

LOOP:  cpu time      0.9617: real time      0.9633

当前tist.py提取cpu time列,而不是后面的real time。它汇总的是这些日志段,并不等于Slurm作业的全部墙钟耗时,也不是GPU硬件性能、排队时长或计费核时。

查看作业实际分配与耗时时,另用:

sacct -j 作业号 --format=JobID,State,Elapsed,AllocCPUS,AllocTRES

同时保留该次计算的核数、GPU、MPI、输入和软件版本,才能解释不同任务的时间差。不要仅凭本文三份日志的不同数值比较硬件速度。

4 总平均电子步时间采用什么口径#

脚本的最终平均是“先分别计算每份文件的平均,再对文件取算术平均”,本例为0.8217689291 s。三份文件电子步数不同,如果将全部400个电子步一起加权,平均值为0.86077725 s。

二者回答的问题不同。比较相同任务的每电子步代价时,需明确自己选择的口径;附件CSV同时提供电子步数与电子CPU时间合计,便于自行加权。

5 压缩OUTCAR在当前Python下的入口#

当前安装的旧脚本使用二进制模式读取gzip。在本例当前Python环境下,它能正常退出,但压缩文件的统计结果会变成零。对未压缩OUTCAR使用原命令即可;读取压缩文件时,使用附件tist-text.py,它只将gzip读取改为文本模式,计数规则保持。

假设tist-text.py在结果目录上一级:

cd results
python3 ../tist-text.py

本例三份OUTCAR压缩后,通过该入口得到的CPU总时间仍是413.7881 s,各文件平均和总平均也与未压缩读取一致。公共安装没有被修改;不要覆盖共享脚本。

6 从附件直接提取和画图#

解压进入vtst-time-summary:

bash read.sh
bash plot.sh
cat analysis/VTST-OUTCAR-CPU-time-summary.csv

reference-results/保留单文件、多目录、压缩文本读取的真实输出,以及旧gzip入口的零值对照。需要在自己的新目录再次运行后处理:

bash run.sh
bash read.sh work-new analysis-new
bash plot.sh analysis-new

该入口只运行日志工具,不提交或重跑VASP;work-new存在时停止,避免覆盖结果。

需要根据你的体系选择资源?联系讨论计算需求。实际可用软件与权限,以当前账户和运行环境为准。

查看配图

放大后可滚动查看细节,按 Esc 关闭。

100%查看原图 ↗