三道只配不管的护栏开始干活:运行时限、模型超时、清单核对

显示成生效却没生效,比明说没有更危险——它让人以为有东西在兜底。

1. max_run_seconds 只存在于配置和设置接口里,没有任何代码执行它:一个挂住的
   模型或工具能把运行和它占着的并发名额一直拖着。现在 runner 用 asyncio.timeout
   强制执行,按"一段执行"计(等人工审批时 _drive 已结束,不算);超时判 failed、
   说清是哪道上限,可以接着跑。别处抛的 TimeoutError 不冒充这道上限(看
   Timeout.expired())。

2. 模型调用从来没设过超时:ModelSpec.timeout 从没被赋值,那条传参分支一次都没
   执行过,所有调用走 SDK 默认的 10 分钟外加重试。新增 model_timeout_seconds
   (默认 300 秒)作为缺省,节点显式配的仍优先;已确认 ChatAnthropic / ChatOpenAI
   都接这个参数。

3. manifest 哈希只写不验,而且是在 run.finished 落库之前算的——清单里恰恰少了
   宣布"跑完了、成果是什么"的那条,改成果清单照样对得上。现在终态事件落库之后
   再封存,并记下封到哪一条(manifest_seq,新列);新增 verify_manifest 与
   GET /api/runs/{id}/verify,运行详情页加了核对按钮。封存之后追加的事件不算篡改。
   老运行没有 manifest_seq,按当时的口径还原范围——开发库里 300 条带哈希的历史
   运行全部核对通过(成功 / 失败 / 取消各类都有),没有一条误报。

设置页「运行环境」补上单次执行时限和模型调用超时两项,README 加了对应的常见问题。

顺带修了一个被 _seal 放大的老问题:_drive 的收尾被打断时(关停取消、库连接出错)
漏掉 _tasks.pop,留下的任务让下一次 shutdown 的 gather 在别的事件循环里抛
"future belongs to a different loop"——测试里表现为每八九轮一次、一出就是几十个
teardown error。pop 移进内层 finally,shutdown 只等未结束的任务并清空。修后全量
连跑 12 轮 12 轮全绿。

test_guardrails.py 8 例:超时中止(挂住的节点 1 秒后被停下)、缺省模型超时、封存覆盖
run.finished、改成果被戳穿、事后追加不误报、老运行按旧口径核、中断态未封存、接口
404。414 → 422 passed。
This commit is contained in:
ThearchyHelios
2026-09-25 15:59:32 +08:00
parent 429398a156
commit 5928cc052e
12 changed files with 337 additions and 26 deletions
+3
View File
@@ -129,6 +129,9 @@ export const api = {
events: (id: string, after = 0) => get<RunEvent[]>(`/runs/${id}/events?after=${after}`),
state: (id: string) => get<any>(`/runs/${id}/state`),
history: (id: string) => get<any[]>(`/runs/${id}/history`),
/** 核对事件流和封存时的清单哈希:事后被改过、删过、插过都会对不上 */
verify: (id: string) => get<{ sealed: boolean; ok: boolean | null; message: string }>(
`/runs/${id}/verify`),
remove: (id: string) => del(`/runs/${id}`),
},
+15 -1
View File
@@ -1,6 +1,6 @@
import { useEffect, useMemo, useState } from 'react'
import { useNavigate, useParams } from 'react-router-dom'
import { Code2, GitFork, History, RefreshCw, Trash2 } from 'lucide-react'
import { Code2, GitFork, History, RefreshCw, ShieldCheck, Trash2 } from 'lucide-react'
import clsx from 'clsx'
import { api } from '../api/client'
import { Empty, Spinner, StatusDot, useToast } from '../components/ui'
@@ -157,6 +157,20 @@ export function RunsPage() {
</div>
</div>
<StatusDot status={selected.status} />
{selected.manifest_hash && (
<button
className="btn btn-sm btn-ghost"
title="核对事件流和封存时的清单是否一致"
onClick={async () => {
try {
const res = await api.runs.verify(selected.id)
toast(res.message, res.ok ? 'ok' : 'error')
} catch (e: any) { toast(e.message ?? '核对失败', 'error') }
}}
>
<ShieldCheck size={11} />
</button>
)}
<button
className={clsx('btn btn-sm btn-ghost', raw && 'text-[var(--accent)]')}
title={raw ? '回到可读视图' : `看原始事件(${events.length} 条)`}
+2
View File
@@ -471,6 +471,8 @@ function SystemTab() {
<Row label="图最大步数" value={info.limits?.max_graph_steps} />
<Row label="Agent 最大步数" value={info.limits?.max_agent_steps} />
<Row label="最大并发运行" value={info.limits?.max_concurrent_runs} />
<Row label="单次执行时限" value={info.limits?.max_run_seconds && `${info.limits.max_run_seconds} 秒`} />
<Row label="模型调用超时" value={info.limits?.model_timeout_seconds && `${info.limits.model_timeout_seconds} 秒`} />
</div>
</div>
</div>