机器状态
DGX Spark 上本项目的资源使用、近 24 小时的异常和后台服务。数字来自系统和各次运行的记录，只读。
磁盘剩余?运行目录所在磁盘的剩余空间。
磁盘还剩 2.6 TB
共 3.7 TB，已用 23%。按最近 24 小时的速度（每天约 70 GB），约可用 38 天。运行目录共占 112.4 GB。
本项目内存 当前 / 历史峰值 / 上限?Spark 上给本项目划出的资源份额，上限 96 GB。
47.7 GB / 91.5 GB / 96 GB
本项目现在用了 47.7 GB，历史峰值 91.5 GB，上限 96 GB。
内存超限次数
11 次
有进程因为内存超限被系统停止过。
CPU?本项目最近一段时间平均占用的 CPU 核数。
1.4 核
最近 5 分 平均用了 1.4 个核（整机 20 核，系统负载 1.7）。
GPU?Spark 的 GB10 显卡；它和 CPU 共用内存，所以显存一栏可能没有数字。
利用率 4%
温度 50 °C，功率 13.74 W。正在用 GPU 的进程：3185, python, 1194。
整机内存
可用 101.1 GB
整机共 121.7 GB，其中本项目最多可用 96 GB。
看板本身
10-03 19:12
上次生成用时 1.6 秒，每 5 分钟自动重新生成。
近 24 小时的异常
大模型调用失败?调用大模型接口报错或异常退出（不含超时和卡死）。
4 次
截止切断?run 的搜索截止前，harness 按计划终止仍在写代码的会话并交接，不是模型故障。
3 次
卡死重启?大模型调用长时间没有任何输出，被自动终止并重试。
0 次
被中断?因重启或大模型接口故障中断，不计入搜索。
2 次
熔断?大模型接口连续出错时自动暂停新任务。
0 次
限流?大模型接口提示请求太频繁，等待后重试。
0 次
大模型调用失败不含超时和卡死重启；熔断在加入熔断功能之前一直是 0。
| 时间 | 运行?一次完整的自动搜索或 Agent 会话，有自己的锁定配置和证据包。 | 类型 | 次数 | 详情 |
|---|---|---|---|---|
| 10-03 17:09 | 20261003-153851-search-t1-D-smoke2h | 截止切断 | 1 | n7 engineer exit 143 |
| 10-03 12:55 | 20261003-093415-search-t1-r2-D-s0 | 大模型调用失败 | 1 | n19 engineer exit 143: exit 143: |
| 10-03 10:48 | 20261003-093415-search-t1-r2-D-s1 | 截止切断 | 1 | n8 engineer exit 143 |
| 10-03 10:22 | 20261003-093415-search-t1-r2-D-s0 | 大模型调用失败 | 1 | n7 engineer exit 143: exit 143: |
| 10-03 01:06 | 20261003-004922-search-t2-embryo-interp-g24 | 大模型调用失败 | 1 | n3 engineer exit 1: {"name": "APIError", "data": {"message": "Cannot connect to API: The socket connection was closed unexpectedly. For more information, pass `verbose: true` in the second argument to fetch()", "isRetrya |
| 10-03 00:39 | 20261002-202908-search-t1-scr-C | 被中断 | 1 | n74: native evaluation_infrastructure: evaluation_infrastructure |
| 10-03 00:08 | 20261002-202908-search-t1-scr-D | 大模型调用失败 | 1 | n28 engineer exit 143: exit 143: |
| 10-02 23:45 | 20261002-202908-search-t1-scr-C | 被中断 | 1 | n58: native evaluation_infrastructure: scorer exit 1: raise ValueError("prediction.X contains negative values; metrics expect log-normalized nonnegative data") | |
| 10-02 21:21 | 20261002-202908-search-t1-scr-B | 截止切断 | 1 | n5 engineer exit 143 |
运行中的后台服务?在 Spark 上以 systemd 用户服务运行的程序，例如每次运行和这个看板本身。
| 运行 | 服务名 | 服务状态 | 状态 |
|---|---|---|---|
| 20261003-172000-search-t2-heart-extrap-chain-12h | vec-search-t2-heart-extrap-chain-12h-20261003-172000 | 运行中 | 运行中 |
| 20261003-171955-search-t2-embryo-interp-chain-12h | vec-search-t2-embryo-interp-chain-12h-20261003-171955 | 运行中 | 运行中 |
| aborted-20261001-203708-search-t1-g21q-B | vec-search-t1-g21q-B-20261001-203708 | 已不存在 | 已中止（未计入实验） |
| aborted-20261001-203709-search-t1-g21q-C | vec-search-t1-g21q-C-20261001-203709 | 已不存在 | 已中止（未计入实验） |
| aborted-20261001-203708-search-t1-g21q-A | vec-search-t1-g21q-A-20261001-203708 | 已不存在 | 已中止（未计入实验） |
| 20261001-140014-search-t1-g23-fake-cont | vec-search-t1-g23-fake-cont-20261001-140014 | 已不存在 | 已停止 |
| 20261001-135922-search-t1-g23-spark | vec-search-t1-g23-spark-20261001-135922 | 已不存在 | 已停止 |
本项目全部后台服务
| 服务名 | 服务状态 | 说明 |
|---|---|---|
| vec--172000-search-t2-heart-extrap-chain-12h-n25-engineer-729330.scope | 运行中 running | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec--172000-search-t2-heart-extrap-chain-12h-n26-engineer-0418ea.scope | 运行中 running | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-001-233756-search-t1-abc-r0-B-population-n14-engineer-c4091d.scope | 失败 failed | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-001-233756-search-t1-abc-r0-B-population-n17-engineer-57439a.scope | 失败 failed | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-001-233756-search-t1-abc-r0-B-population-n8-engineer-539305.scope | 失败 failed | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-001-233756-search-t1-abc-r0-B-population-n8-exec-da8f75.scope | 失败 failed | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-171955-search-t2-embryo-interp-chain-12h-n35-engineer-67fba7.scope | 运行中 running | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-171955-search-t2-embryo-interp-chain-12h-n36-engineer-c7592b.scope | 运行中 running | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-20261001-233756-search-t1-abc-r0-A-era-n18-engineer-1dc3db.scope | 失败 failed | /usr/bin/bwrap --die-with-parent --unshare-pid --unshare-ipc --unshare-net --proc /proc --dev /dev --ro-bind /usr /usr --ro-bind /etc /etc --ro-bind /opt /opt -… |
| vec-score-search-t2-heart-extrap-chain-12h-dfe9a932.scope | 运行中 running | /home/spark-longxinyang/.venvs/vec/bin/python -c "\nimport json, shutil, sys, tempfile, time\nfrom pathlib import Path\nscorer, req = Path(sys.argv[1]).resolve(… |
| vec-abc-chain.service | 失败 failed | /usr/bin/bash scripts/abc_chain.sh 0 1 |
| vec-dashboard-http.service | 运行中 running | VEC dashboard HTTP on 127.0.0.1:8765 (G25, read-only static files) |
| vec-dashboard.service | 启动中 start | start VEC dashboard build (G25, read-only) |
| vec-notify-alerts.service | 已停止 dead | VEC notify: alert scan (crash, tainted, compliance, quota) (G51) |
| vec-notify-health.service | 已停止 dead | VEC notify: health report mail every 2 h (G51) |
| vec-search-t2-embryo-interp-chain-12h-20261003-171955.service | 运行中 running | /home/spark-longxinyang/.venvs/vec/bin/python /home/spark-longxinyang/vec/runs/formal/20261003-171955-search-t2-embryo-interp-chain-12h/code/agent/harness.py re… |
| vec-search-t2-heart-extrap-chain-12h-20261003-172000.service | 运行中 running | /home/spark-longxinyang/.venvs/vec/bin/python /home/spark-longxinyang/vec/runs/formal/20261003-172000-search-t2-heart-extrap-chain-12h/code/agent/harness.py res… |
| vec.slice | 运行中 active | Slice /vec |
| vec-dashboard.timer | 运行中 running | VEC dashboard rebuild every 5 min (G25) |
| vec-notify-alerts.timer | 运行中 waiting | VEC notify alert scan every 10 min (G51) |
| vec-notify-health.timer | 运行中 waiting | VEC notify health report every 3 h (user 2026-10-03) |