mirror of
https://github.com/ThearchyHelios/AgentLab.git
synced 2026-11-20 12:12:00 +00:00
可点击证据第二期:取数链路打通、问数据的答案逐段可点;发布前自动修复
一、可点击证据第二期
取数链路
- 智能体、工具节点、代码节点、知识检索取数时都记进证据台账;报告目录按台账编出 Q1… / K1…
- 报告可以引用快照里的一格([[v:Q1.r0.gmv]]),也可以由系统从快照生成整张表([[table:Q1 cols=… rows=0-4]]),
表里每一格都是可点的片段;取值一律以快照为准,取回快照时复验哈希
- 口径卡表达式新增 cell(x, row, column),lineage 精确到单元格
- 智能体开 cite_fields(配合 output_schema)后,循环结束做一次结构化抽取,每个字段标出取自哪次查询的哪一格,
再到快照里核对:一致记 verified;不一致以快照为准并告警;查不到的记为空值,永远不兜底成 0
- 代码节点新增 evidence_role(source / compute)和 code_sha;沙箱算出来的数不能被报告直接引用,要进口径卡
- 查询快照记下列类型,文本列按文本渲染(年份 "2026" 不再显示成「2,026」)
- 升级前发起的运行(停在审批上的)一律走旧逻辑:新的 task 只追加在循环之后,恢复时不会错号
证据接口与面板
- 片段链接上查询步骤:SQL、被引用的行加前后各 2 行、高亮到格;数据源可设 mask_columns 遮罩列,
遮罩在查询时记进快照,数据源事后改名或删除也照样遮罩(在有身份体系之前,遮罩只减少暴露,不是安全边界)
- 输入来源写明核对结果(与快照一致 / 模型报的值和快照不一致 / 没查到记为空);口径卡缺输入时也给出完整的链
- 受管出具要在契约里声明 cells 才能引用单元格;受管与否记在所钉版本上,改画布不再让受管版本的正式运行降级
- 口径卡可以用 caliber_from 钉住另一个已发布工作流里的口径卡,上游有新版本时按 upgrade_policy 处置,
和子工作流同一套规则;子工作流节点也补上了升版处置的配置项
Copilot、校验与报错
- 问数据的答案里有数字时,搭 input → 智能体 → 报告 → 出口,报告直接引用查过的单元格
- 写 SQL 前核对数据源的表结构,SQL 里出现表结构里没有的列会被打回
- 不再搭「智能体文字 → 转换节点解析 JSON」这种图;转换节点的 JSON 报错分清是上游模型写坏了、
模板里裸插了模型文字(给出 | json 的改法),还是模板本身写错了
- 工具节点遇到「查询失败」「SQL 被拒绝」判为失败;发起运行前检查绑定的工具是否存在,不存在时直接拒绝并给出入口
二、发布前自动修复
- 问题带上机器编号(code)和修复 id;新增只读接口 POST /api/workflows/{id}/publish-check 和 /autofix
- 修复分三类:答案唯一、不降低要求的一键修复;要人拿主意的给选项(不替人选);结构性问题交给 Copilot
- 一律先预览,不自动保存、不自动发布;删节点、删契约、放宽审批、关掉 strict、改级别等降低要求的改动一律拒绝,
Copilot 的方案也要过这一关;应用后重跑检查,错误必须变少且不能冒出新的
- 发布弹窗打开就先检查;问题面板新增「发布前检查」,平时就能看到、就地修掉
- 门禁修正:契约有 report_from 时不再要求 narrative(模板⑨可以发成受管);全图默认审批为「全部放行」时同样拦下
- 修掉画布保存会抹掉全图默认(defaults)的老问题:以前任何一次保存都会把它清空,审批 always 因此被悄悄放宽
验证(沙箱):tsc 干净,生产构建通过,pytest 2268 passed(两遍),check-all 17 项检查、3915 项全过
(新增 check-publish);关键行为做了变异验证、全部抓到。
This commit is contained in:
@@ -644,6 +644,9 @@ function queryTitle(sql: string, source: string): string {
|
||||
return clip(`查询 ${what}${how ? ` · ${how}` : ''}`)
|
||||
}
|
||||
|
||||
/** agent 开了 cite_fields 时循环结束后那次结构化抽取 */
|
||||
const EXTRACT_TITLE = '按出处抽取字段'
|
||||
|
||||
/** 审批行末尾:批的时候点了「始终允许」,这个工具之后不再问人 */
|
||||
const ALWAYS_NOTE = ',并设为「始终允许 · 门控把关」'
|
||||
|
||||
@@ -700,6 +703,34 @@ function explainLog(code: string | undefined, message: string): Pick<Step, 'titl
|
||||
sub: message.match(/没通过核对((.+?))/)?.[1],
|
||||
}
|
||||
}
|
||||
case 'agent_field_mismatch': {
|
||||
// 「有 1 个字段和查询快照对不上,已按快照取值:order_cnt 模型报 1240,快照是 1234」(llm.py _field_warnings)
|
||||
const n = message.match(/有\s*(\d+)\s*个字段/)?.[1]
|
||||
return {
|
||||
title: `有${n ? ` ${n} 个` : ''}字段和查询快照对不上,已按快照取值`,
|
||||
sub: message.match(/已按快照取值[::]\s*(.+)$/)?.[1]?.trim() || undefined,
|
||||
next: '下游用的是查询快照里的值,不是模型报的。模型报的数多半是抄错、四舍五入或自己算的',
|
||||
}
|
||||
}
|
||||
case 'agent_field_unverified': {
|
||||
// 两种原话:「有 N 个字段核对不了出处,记为空值(没有兜底成 0):a(原因);b(原因)」;
|
||||
// 抽取没成:「<原因>。N 个字段都记为空值(没有兜底成 0)」,原因是「结构化抽取没跑成:<调用的错>」
|
||||
// 或者「抽取结果不是一个对象」(llm.py 的 failed)
|
||||
const failed = message.match(/^(?:结构化抽取没跑成[::])?([\s\S]+?)。\s*(\d+)\s*个字段都记为空值/)
|
||||
if (failed) {
|
||||
return {
|
||||
title: `按出处抽取字段没跑成,${failed[2]} 个字段记为空值(没有兜底成 0)`,
|
||||
sub: failed[1].trim() || undefined,
|
||||
next: '这些字段交给下游的是空值;口径卡按缺输入处理。原因解决后重跑',
|
||||
}
|
||||
}
|
||||
const n = message.match(/有\s*(\d+)\s*个字段/)?.[1]
|
||||
return {
|
||||
title: `有${n ? ` ${n} 个` : ''}字段核对不了出处,记为空值(没有兜底成 0)`,
|
||||
sub: message.match(/没有兜底成 0)[::]\s*(.+)$/)?.[1]?.trim() || undefined,
|
||||
next: '模型说的出处在查询结果里找不到。让它先查到这些字段再交,查不到的就是空',
|
||||
}
|
||||
}
|
||||
case 'repair_invented': {
|
||||
// 「第 1 次修复作废:修复时出现了原文没有的值:total_count=0」
|
||||
const values = message.match(/原文没有的值[::]\s*(.+)$/)?.[1]?.trim()
|
||||
@@ -1356,9 +1387,12 @@ export function decodeRun(events: RunEvent[], final?: RunFinal, opts?: DecodeOpt
|
||||
// 一出现就成行:模型想的那几十秒里得有一行在走,而不是等 end 才冒出来。
|
||||
// 团队成员和调度者的调用没有 start(它们的 end 只用来记账),不会走到这
|
||||
closeLlm(nodeId, 'done', at)
|
||||
// agent 开了 cite_fields:循环结束后多一次结构化抽取,按出处把字段交出来。它不是在「作答」
|
||||
const extract = d.purpose === 'cite_fields'
|
||||
const step: Step = {
|
||||
id: `llm-${seq}`, seq, kind: 'llm', title: '思考并作答',
|
||||
id: `llm-${seq}`, seq, kind: 'llm', title: extract ? EXTRACT_TITLE : '思考并作答',
|
||||
status: 'running', nodeId, startedAt: at,
|
||||
...(extract ? { code: 'cite_fields' } : {}),
|
||||
...(d.model ? { detail: `模型:${d.model}` } : {}),
|
||||
}
|
||||
pendingLlm.set(nodeId ?? '_', step)
|
||||
@@ -1388,6 +1422,13 @@ export function decodeRun(events: RunEvent[], final?: RunFinal, opts?: DecodeOpt
|
||||
step.ms = num(d.duration_ms)
|
||||
step.meta = dur(step.ms)
|
||||
if (d.model && !step.detail) step.detail = `模型:${d.model}`
|
||||
if (d.purpose === 'cite_fields' && d.error) {
|
||||
// 抽取没跑成:agent 的结论还在,字段记空值、接着发警告——节点不失败,这一行是提醒。
|
||||
// 状态记成做完(琥珀色)而不是 failed:failed 会把这一行和「执行」那一栏的标头都画成红的
|
||||
step.level = 'warn'
|
||||
step.title = `${EXTRACT_TITLE}没跑成`
|
||||
step.detail = [String(d.error), step.detail].filter(Boolean).join('\n')
|
||||
}
|
||||
pendingLlm.delete(nodeId ?? '_')
|
||||
break
|
||||
}
|
||||
|
||||
Reference in New Issue
Block a user