mirror of
https://github.com/ThearchyHelios/AgentLab.git
synced 2026-11-22 07:22:01 +00:00
可验证报告复核修正(第 1 轮):运行信息拿已核对的事件对照,报告徽标连同数字一起算,遮罩判定宁严勿宽,各分支在浏览器里有确定的检查
- 页面核对加 ⑥ 运行信息:运行结果看封存范围内最后一条结束类事件的类型,运行类别看运行开始事件记下的运行参数, 出具档位认最后一条出具判定(不再信元信息指的那一条);页面显示事件里的值,元信息写得不一样算不通过、计入总览。 工作流名、版本、起止时间、节点名称绑不进封存,单列一组写明取自运行记录,封存说明里也写明要到系统里一并对照 - 报告标题旁的徽标连同正文里的数字一起算,旁边写分项:重算全部哈希的伪造只在 ⑤ 露馅,徽标不能还写着通过。 分块条目多时不通过和无法核对的都列在外面,有无法核对的显示「部分无法核对」和分项计数;⑤ 改叫「数字与取值」并分开数, 读屏分别读作数字、取值,「显示格式由服务端渲染」只附在带出处的数字上;无出处数字的说法改成未使用引用标记 - 服务端不会给出的状态算不通过:被引用的工件不在清单里、非查询快照标着遮罩、工件既没内容也没说明;报告文档导出时 已不在服务端,总览不再是绿色的通过,写「有 N 份报告未能核对」,报告处写明是服务端已没有这份文档 - 认 json.dumps 写出的裸 NaN / Infinity,没被改过的文件不再误判不通过;哈希对得上但读不懂的照实写「无法核对」, 和哈希不一致分开说 - 宽屏打开出处面板时正文让出右边一栏,表格里右对齐的数字不再被面板盖住;补上斜体(不用后行断言,较早的 Safari 也能执行) - 封存哈希、运行 ID、工作流名直接写进页面,不执行脚本时写「尚未核对」而不是一直「正在核对」;脚本挪进 head, 执行后核一遍页面顶部写出的封存哈希和数据里核对用的一致 - 成果节点和运行结束事件的规范字符串,只在封存范围内每次数据源查询都对得上无遮罩的快照(或确实没交回数据)时才给: 升级前的运行从工具快照认出查询快照,协作团队成员的查询认不出就按带遮罩算,数据源现在设了遮罩的按工具名就挡 - 封存核对不一致的 409 改成一句固定的话,不再叠冒号、让人去本来就在的记录页;失败结束的运行在页面封存说明和导出提示里 写明之后继续运行会重新封存;记录页上左边写着「已封存」却不能导出时,原因写在屏幕上 - tests/bundle_samples.py 用虚构数据真实生成九份样本页(遮罩快照、两份报告、早期运行、失败结束、两条出具判定、 服务端缺文件、裸 NaN、别的运行的文档),check-bundle 断网打开逐项断言,在上面篡改引用链、运行信息、拿掉被引用的口径卡, 量宽屏面板,看不执行脚本的样子;把核对改成恒通过、徽标不看数字等七种改坏法都会变红。pytest 补遮罩判定的三种形状、 事后设遮罩(去掉接线即变红)、页面静态内容和样本页本身
This commit is contained in:
@@ -5,7 +5,7 @@
|
||||
|
||||
- 只给已封存且封存核对一致的运行:没封存、封存后被改过都回 409;
|
||||
- 导出的数据里,事件行按浏览器的拼法重算等于运行记下的 manifest_hash;
|
||||
- 遮罩库的快照只有 id 没有内容,它的查询事件只有哈希;
|
||||
- 遮罩库的快照只有 id 没有内容,它的查询事件只有哈希;运行之后才设的遮罩同样生效;
|
||||
- 附件名是「<运行名>-可验证报告.html」,中文名按 RFC 5987 编码;
|
||||
- 只读:导出前后运行记录、事件一条不多一条不少。
|
||||
|
||||
@@ -213,6 +213,39 @@ async def test_the_page_is_named_after_the_run(client, monkeypatch):
|
||||
assert f"filename*=UTF-8''{quote('门店周报-可验证报告.html', safe='')}" in header
|
||||
|
||||
|
||||
async def set_masks(name: str, columns: list[str]) -> None:
|
||||
"""只改数据源的遮罩列(options.mask_columns),别的不动。"""
|
||||
async with SessionLocal() as session:
|
||||
row = (await session.execute(select(DataSource).where(DataSource.name == name))).scalar_one()
|
||||
row.options = {**(row.options or {}), "mask_columns": columns}
|
||||
await session.commit()
|
||||
source_id = row.id
|
||||
await engines.invalidate(source_id)
|
||||
|
||||
|
||||
async def test_a_mask_set_after_the_run_still_applies(client, monkeypatch):
|
||||
"""运行之后才给数据源设遮罩:快照里没记 mask_columns,导出时照样按数据源现在的遮罩挡(和证据面板一个道理)。"""
|
||||
await set_masks("bundle_crm", [])
|
||||
row = await sealed_run(monkeypatch)
|
||||
shop = await query_artifact(row.id, "fetch")
|
||||
|
||||
def shown(bundle) -> dict[str, bool]:
|
||||
events = {(e["type"], e["node_id"]): "canonical" in e for e in bundle["events"]}
|
||||
return {"fetch": events[("tool.end", "fetch")], "members": events[("tool.end", "members")],
|
||||
"out": events[("node.finished", "out")], "finished": events[("run.finished", None)]}
|
||||
|
||||
# 对照:查询时、导出时都没有遮罩,快照随文件附带,成果和运行结束事件带规范字符串
|
||||
before = data_of((await client.get(f"/api/runs/{row.id}/bundle.html")).text)
|
||||
assert all("b64" in a for a in before["artifacts"])
|
||||
assert shown(before) == {"fetch": True, "members": True, "out": True, "finished": True}
|
||||
|
||||
await set_masks("bundle_shop", ["amount"])
|
||||
after = data_of((await client.get(f"/api/runs/{row.id}/bundle.html")).text)
|
||||
assert next(a for a in after["artifacts"] if a["id"] == shop) == {
|
||||
"id": shop, "kind": "query", "node_id": "fetch", "masked": True}
|
||||
assert shown(after) == {"fetch": False, "members": True, "out": False, "finished": False}
|
||||
|
||||
|
||||
async def test_report_text_cannot_close_the_data_block(client, monkeypatch):
|
||||
row = await sealed_run(monkeypatch, text="结论见下:</script><script>alert(1)</script> 流水 [[v:Q1.r0.amount]]。")
|
||||
html = (await client.get(f"/api/runs/{row.id}/bundle.html")).text
|
||||
@@ -289,8 +322,9 @@ async def test_a_broken_seal_is_refused(client, monkeypatch):
|
||||
await session.commit()
|
||||
resp = await client.get(f"/api/runs/{row.id}/bundle.html")
|
||||
assert resp.status_code == 409
|
||||
body = resp.json()
|
||||
assert body["code"] == "bundle_seal_broken" and "封存核对不一致" in body["detail"], body
|
||||
# 原样出现在记录页的错误提示里:一句说清,不叠冒号、不把封存核对的整句结论再拼进来
|
||||
assert resp.json() == {"detail": "封存核对不一致:封存后有事件被修改、删除或插入,不能导出可验证报告。"
|
||||
"点「核对」可查看核对结果", "code": "bundle_seal_broken"}
|
||||
|
||||
|
||||
async def test_an_unknown_run_is_404(client):
|
||||
|
||||
Reference in New Issue
Block a user