mirror of
https://github.com/ThearchyHelios/AgentLab.git
synced 2026-11-17 22:41:57 +00:00
合入期 4 整合 J4:质询回答工件在记录页有名字和说明;问答串在审批列表取失败时不再漏条目;运行对比的默认基准与定时任务自动对比用同一条规则(同一任务、同一工作流、比这次先发起的上一次成功并封存的运行),触发历史在基准不是紧挨着的上一次时写明「与上一次成功的运行对比」
This commit is contained in:
+133
-12
@@ -9,10 +9,14 @@
|
||||
// 同一节点两条查询的 (node_id, ordinal) 相同;一边的 SQL 是 null;基准运行读不到;本次的记录读不到;不属于已保存
|
||||
// 工作流的运行;查找基准期间离开运行详情(新页面画好之后、或者地址刚换新页面还没画出来时答复才回来,走过的地址里
|
||||
// 都不能出现对比页)。下一步的提示要和页面上真能做的事对得上:下拉里没有能换的运行就不叫人去上方换,本次的记录
|
||||
// 不存在时不给注定失败的「重试」。
|
||||
// 不存在时不给注定失败的「重试」。默认基准的说法照服务端的挑法(api/compare.py 的 pick_base)写「上一次成功的运行」
|
||||
// ——上一次失败了,基准是再往前成功的那一次;定时任务触发历史里的「与上一次对比」和运行详情里的同名入口打开同一对
|
||||
// 运行、写同一句来历,基准不是紧挨着的上一次时触发历史上看得见的字写明「上一次成功的运行」;找不到默认基准时标题不说
|
||||
// 「没有可作为基准的运行」(失败、取消的照样能手动选),换基准的下拉和基准卡写明哪次失败、取消了。
|
||||
//
|
||||
// 全部用 page.route 假接口:虚构的「区域销售周报」三次已封存的正式运行和一次没封存的,运行详情、运行列表、
|
||||
// compare/base、compare、定时任务列表都在浏览器层答掉,别的 GET 放行(外壳要的工作流、待审批),非 GET 一律拦掉。
|
||||
// compare/base、compare、定时任务列表、发起它们的定时任务和触发历史都在浏览器层答掉,别的 GET 放行(外壳要的工作流、
|
||||
// 待审批),非 GET 一律拦掉。
|
||||
// 运行对比的两个接口只读,这里的假答复严格照接口约定的字段名和形状。
|
||||
//
|
||||
// node scripts/check-compare.mjs
|
||||
@@ -181,10 +185,32 @@ function comparison(target, base) {
|
||||
const LABEL = { unchanged: '未变', data_only: '只数据变', caliber_and_data: '口径与数据都变', sql_changed: 'SQL 结构变',
|
||||
params_only: '只参数变', added: '新增', removed: '移除', incomparable: '无法比较' }
|
||||
const ORDER = ['data_only', 'caliber_and_data', 'sql_changed', 'params_only', 'added', 'removed', 'incomparable', 'unchanged']
|
||||
const REASON = '默认基准:同一定时任务的上一次运行'
|
||||
const FINDING = '正在查找上一次运行'
|
||||
// 默认基准只挑比本次先发起、成功结束并封存的运行(服务端 api/compare.py 的 pick_base):说法里都是「上一次成功的运行」
|
||||
const REASON = '默认基准:同一定时任务上一次成功的运行'
|
||||
const REASON_WORKFLOW = '默认基准:同一工作流、同一运行类别上一次成功的运行'
|
||||
const FINDING = '正在查找上一次成功的运行'
|
||||
/** 409、422、缺基准的 404 时下拉里没有能换的运行:不叫人去上方换,照实说 */
|
||||
const NO_OTHER = '同一工作流没有其他可换作基准的已封存运行'
|
||||
/** 服务端(api/compare.py 的 NO_BASE_TEXT)找不到默认基准时的原话 */
|
||||
const NO_BASE_SERVER = '没有找到上一次成功的运行:需要同一工作流、同一运行类别里比这次先发起、成功结束并已封存的运行'
|
||||
|
||||
/**
|
||||
* 发起本次和基准的定时任务(RUNS 里的 schedule_id)和它的触发历史:本次那一行带服务端自动对比的计数,基准是 B、不是
|
||||
* 紧挨着的上一次(previous: false,假定 B 之后同一定时任务还有一次失败的;那一次不进 RUNS,换基准的下拉照旧)。
|
||||
* 只给「两个入口拿同一个基准」那一段用:触发历史和运行详情「更多」里的同名入口,服务端用同一个函数挑基准
|
||||
*/
|
||||
const SCHEDULE_ID = 'sch0weekly'
|
||||
const SCHEDULE = {
|
||||
id: SCHEDULE_ID, name: '区域销售周报 · 每周', workflow_id: WF, workflow_name: NAME, cron: '0 9 * * 1', timezone: 'Asia/Shanghai',
|
||||
run_class: 'formal', input_template: {}, enabled: true, overlap: 'skip', misfire_grace_s: 3600, webhook: null,
|
||||
next_run_at: '2026-10-12T01:00:00Z', last_fire: null, description_text: '每周一 09:00(Asia/Shanghai)', created_by: '值班分析员',
|
||||
created_at: day('09-01'), updated_at: day('09-01'), version: 2,
|
||||
}
|
||||
const FIRE_T = 'fire0target'
|
||||
const FIRES = [{
|
||||
id: FIRE_T, fire_at: day('10-05'), kind: 'scheduled', status: 'started', run_id: T, run_status: 'succeeded', reason: null,
|
||||
notified: [], created_at: day('10-05'), compare: { base_run_id: B, previous: false, summary: SUMMARY },
|
||||
}]
|
||||
|
||||
// ---------------------------------------------------------------- 假接口
|
||||
|
||||
@@ -226,7 +252,7 @@ function defaults(opts) {
|
||||
if (m) {
|
||||
if (opts.base) return opts.base(m[1])
|
||||
return m[1] === T ? { json: { base_run_id: B, reason: 'same_schedule', base: refOf(B) } }
|
||||
: { status: 404, json: { detail: '没有找到可作为基准的运行' } }
|
||||
: { status: 404, json: { detail: NO_BASE_SERVER, code: 'compare_no_base' } }
|
||||
}
|
||||
m = p.match(/^\/api\/runs\/([^/]+)\/compare$/)
|
||||
if (m) {
|
||||
@@ -247,6 +273,9 @@ function defaults(opts) {
|
||||
if (m[2] === '/artifacts') return { json: [] }
|
||||
}
|
||||
if (p === '/api/approvals' && url.searchParams.get('run_id')) return { json: [] }
|
||||
// 发起本次的定时任务和它的触发历史(只有直接打开那个定时任务的页面时才用到)
|
||||
if (p === `/api/schedules/${SCHEDULE_ID}`) return { json: SCHEDULE }
|
||||
if (p === `/api/schedules/${SCHEDULE_ID}/fires`) return { json: { items: FIRES, next_before: null } }
|
||||
// 查找基准期间离开运行详情去的那一页(定时任务列表):给空的列表,页面落定不靠服务端里有什么
|
||||
if (p === '/api/schedules') return { json: { items: [] } }
|
||||
return null
|
||||
@@ -397,7 +426,7 @@ async function findingBase(answer = { json: { base_run_id: B, reason: 'same_sche
|
||||
|
||||
await section('查找基准期间:看得见在做事,离开之后不再跳走', async () => {
|
||||
const { page, release, ended, noted, visited, errors } = await findingBase()
|
||||
check('点了之后有「正在查找上一次运行」的提示', noted)
|
||||
check('点了之后有「正在查找上一次成功的运行」的提示', noted)
|
||||
// 改主意去了别的页面。等那一页画好、运行详情卸下之后再放行:答复晚到也不能把人拽回对比页
|
||||
await page.evaluate((to) => { history.pushState({}, '', to); dispatchEvent(new PopStateEvent('popstate')) }, AWAY)
|
||||
await awaySettled(page)
|
||||
@@ -476,6 +505,61 @@ await section('未封存的运行:入口不可点并说明原因', async () =>
|
||||
}
|
||||
})
|
||||
|
||||
/** 在运行详情里点「更多」→「与上一次对比」,等对比页落定 */
|
||||
async function viaMenu(page) {
|
||||
await page.locator(`[data-run-detail="${T}"]`).waitFor({ timeout: 10000 })
|
||||
await page.getByRole('button', { name: '更多操作' }).click()
|
||||
await page.locator('[data-menu=compare]').click()
|
||||
await page.waitForURL((u) => u.pathname === '/runs/compare', { timeout: 8000 })
|
||||
await settled(page)
|
||||
}
|
||||
|
||||
await section('默认基准的说法:上一次成功的运行', async () => {
|
||||
// 服务端只挑比本次先发起、成功结束并封存的运行:上一次失败、取消了时基准是再往前成功的那一次,「上一次运行」是错的
|
||||
for (const [reason, want] of [['same_schedule', REASON], ['same_workflow', REASON_WORKFLOW]]) {
|
||||
const base = () => ({ json: { base_run_id: B, reason, base: refOf(B) } })
|
||||
const menu = await open(`/runs/${T}`, { base })
|
||||
await viaMenu(menu.page)
|
||||
const fromMenu = (await maybeText(menu.page.locator('[data-compare-reason]'))).trim()
|
||||
const self = await open(comparePath(T), { base })
|
||||
await settled(self.page)
|
||||
const fromPage = (await maybeText(self.page.locator('[data-compare-reason]'))).trim()
|
||||
check(`${reason}:从运行详情进入、只带本次打开,都写「${want}」`, fromMenu === want && fromPage === want, `${fromMenu} | ${fromPage}`)
|
||||
const pages = [await menu.page.locator('[data-compare-page]').innerText(), await self.page.locator('[data-compare-page]').innerText()]
|
||||
check(`${reason}:页面上不出现「上一次运行」这类不分成败的说法`, pages.every((t) => !t.includes('上一次运行')))
|
||||
check(`${reason}:页面没有报错`, ![...menu.errors, ...self.errors].length, [...menu.errors, ...self.errors].join(';'))
|
||||
for (const c of opened) await c.close().catch(() => {})
|
||||
opened.clear()
|
||||
}
|
||||
})
|
||||
|
||||
await section('运行详情与触发历史的「与上一次对比」:同一个基准、同一句来历', async () => {
|
||||
// 两处的基准由服务端用同一个函数挑(api/compare.py 的 pick_base):上一次失败了,两处都是再往前成功的 B。两处真的
|
||||
// 一致由 backend/tests/test_scheduler_compare.py 守,这里守前端两个入口都原样用服务端给的基准
|
||||
const menu = await open(`/runs/${T}`)
|
||||
await viaMenu(menu.page)
|
||||
const hist = await open(`/schedules/${SCHEDULE_ID}?tab=history`)
|
||||
const link = hist.page.locator(`[data-fire-id="${FIRE_T}"] [data-fire-compare]`)
|
||||
await link.waitFor({ timeout: 10000 })
|
||||
const label = (await link.locator('[data-fire-compare-label]').innerText()).trim()
|
||||
check('触发历史:基准不是紧挨着的上一次,链接上看得见的字写「与上一次成功的运行对比」', label === '与上一次成功的运行对比', label)
|
||||
await link.click()
|
||||
await hist.page.waitForURL((u) => u.pathname === '/runs/compare', { timeout: 8000 })
|
||||
await settled(hist.page)
|
||||
const [a, b] = [new URL(menu.page.url()), new URL(hist.page.url())]
|
||||
check('两个入口打开的是同一对运行(本次和基准都一样)', a.searchParams.get('target') === T && b.searchParams.get('target') === T
|
||||
&& a.searchParams.get('base') === B && b.searchParams.get('base') === B, `${a.search} | ${b.search}`)
|
||||
const [ra, rb] = [(await maybeText(menu.page.locator('[data-compare-reason]'))).trim(),
|
||||
(await maybeText(hist.page.locator('[data-compare-reason]'))).trim()]
|
||||
check('两个入口写的默认基准一字不差:同一定时任务上一次成功的运行', ra === REASON && rb === REASON, `${ra} | ${rb}`)
|
||||
const tiles = (page) => page.locator('[data-compare-summary] [data-compare-class]').evaluateAll((els) =>
|
||||
els.map((e) => `${e.getAttribute('data-compare-class')}=${e.querySelector('[data-compare-count]')?.textContent?.trim()}`).join(' '))
|
||||
const [ta, tb] = [await tiles(menu.page), await tiles(hist.page)]
|
||||
check('两边的变化摘要一致', !!ta && ta === tb, `${ta} | ${tb}`)
|
||||
check('没有发出写请求', ![...menu.blocked, ...hist.blocked].length, [...menu.blocked, ...hist.blocked].join(';'))
|
||||
check('页面没有报错', ![...menu.errors, ...hist.errors].length, [...menu.errors, ...hist.errors].join(';'))
|
||||
})
|
||||
|
||||
await section('两次运行与摘要', async () => {
|
||||
const { page, errors } = await open(comparePath(T, B))
|
||||
await settled(page)
|
||||
@@ -791,6 +875,41 @@ await section('换基准、互换', async () => {
|
||||
`${listsBefore} → ${lists()}`)
|
||||
})
|
||||
|
||||
await section('换基准:失败、取消的运行写明状态,默认基准只取成功结束的', async () => {
|
||||
// 默认基准跳过失败、取消的运行(服务端 pick_base),手动选不限:下拉和基准卡上得看得出哪次没成功,人读懂「上一次成功的
|
||||
// 运行」之后才挑得出成功的那一次。两次都封存过,都能选
|
||||
const F = 'c0ffee0failed0000000000000000005'
|
||||
const C = 'c0ffee0cancel0000000000000000006'
|
||||
RUNS[F] = runOf(F, { status: 'failed', version: 3, created_at: day('10-01'), started_at: day('10-01'), finished_at: '2026-10-01T01:01:00Z' })
|
||||
RUNS[C] = runOf(C, { status: 'cancelled', version: 3, created_at: day('10-02'), started_at: day('10-02'), finished_at: '2026-10-02T01:01:00Z' })
|
||||
try {
|
||||
const { page, errors } = await open(comparePath(T, F))
|
||||
await settled(page)
|
||||
const picker = page.locator('select[data-compare-base-picker]')
|
||||
await until(async () => (await picker.locator('option').count()) > 2)
|
||||
const options = Object.fromEntries(await picker.locator('option').evaluateAll((els) =>
|
||||
els.map((o) => [o.value, { text: o.textContent ?? '', disabled: o.disabled }])))
|
||||
check('下拉:失败的那次写「失败」,照样能选', !!options[F]?.text.includes('· 失败') && !options[F].disabled, JSON.stringify(options[F]))
|
||||
check('下拉:取消的那次写「已取消」,照样能选', !!options[C]?.text.includes('· 已取消') && !options[C].disabled, JSON.stringify(options[C]))
|
||||
check('下拉:成功结束的不另写状态', !!options[B] && !/失败|已取消|已完成/.test(options[B].text), options[B]?.text)
|
||||
const card = page.locator('[data-compare-run="base"]')
|
||||
check('下拉下面的说明写明默认基准只取成功结束的运行', (await card.innerText()).includes('默认基准只取成功结束的运行'),
|
||||
(await card.innerText()).replace(/\s+/g, ' '))
|
||||
const status = card.locator('[data-compare-run-status]')
|
||||
check('基准卡:失败的那次标出「失败」', await status.count() === 1 && (await status.innerText()).trim() === '失败',
|
||||
await status.innerText().catch(() => '没有'))
|
||||
check('本次卡:成功结束的不标状态', await page.locator('[data-compare-run="target"] [data-compare-run-status]').count() === 0)
|
||||
await picker.selectOption(B)
|
||||
await until(async () => new URL(page.url()).searchParams.get('base') === B)
|
||||
await settled(page)
|
||||
check('换成成功结束的那次:基准卡不再标状态', await until(async () => await card.locator('[data-compare-run-status]').count() === 0))
|
||||
check('页面没有报错', errors.length === 0, errors.join(';'))
|
||||
} finally {
|
||||
delete RUNS[F]
|
||||
delete RUNS[C]
|
||||
}
|
||||
})
|
||||
|
||||
await section('过时的答复不盖掉新的', async () => {
|
||||
let release
|
||||
const gate = new Promise((r) => { release = r })
|
||||
@@ -878,15 +997,18 @@ await section('出错与找不到基准', async () => {
|
||||
await settled(flaky.page)
|
||||
check('其他错误:给「重试」,重试后正常显示', await flaky.page.locator('tr[data-compare-metric]').count() === METRICS.length)
|
||||
|
||||
// 只带本次:页面自己找基准,找不到时写原因,下拉照样能选
|
||||
const lone = await open(comparePath(T), { base: () => ({ status: 404, json: { detail: '同一工作流没有其他已封存的正式运行' } }) })
|
||||
// 只带本次:页面自己找基准,找不到时写原因,下拉照样能选。标题只说没有默认基准:失败、取消但封存了的运行不当默认
|
||||
// 基准,却照样能手动选,写成「没有可作为基准的运行」就和下面「可在上方选择」打架
|
||||
const lone = await open(comparePath(T), { base: () => ({ status: 404, json: { detail: NO_BASE_SERVER, code: 'compare_no_base' } }) })
|
||||
await settled(lone.page, 'error')
|
||||
const noBase = lone.page.locator('[data-compare-error="no-base"]')
|
||||
check('找不到基准:写明原因', (await noBase.locator('[data-compare-error-title]').innerText()).includes('未找到可作为基准的运行')
|
||||
&& (await noBase.innerText()).includes('同一工作流没有其他已封存的正式运行'))
|
||||
check('找不到基准:标题写「没有默认基准」,后面跟服务端的原因', (await noBase.locator('[data-compare-error-title]').innerText()).trim() === '没有默认基准'
|
||||
&& (await noBase.innerText()).includes(NO_BASE_SERVER), (await noBase.innerText()).replace(/\s+/g, ' '))
|
||||
check('找不到基准:仍能手动选', await lone.page.locator('select[data-compare-base-picker]').isEnabled())
|
||||
check('找不到基准、下拉里有能选的:说可在上方选', await until(async () => (await noBase.innerText()).includes('可在上方选择')),
|
||||
(await noBase.innerText()).replace(/\s+/g, ' '))
|
||||
check('找不到基准:不说「没有可作为基准的运行」这类和「可在上方选择」矛盾的话', !/可作为基准的运行|没有可以对比/.test(await noBase.innerText()),
|
||||
(await noBase.innerText()).replace(/\s+/g, ' '))
|
||||
// 同一工作流只有一次没封存的:下拉里没有能选的,不能再叫人去上方选
|
||||
const bare = await open(comparePath(T), { base: () => ({ status: 404, json: { detail: '同一工作流没有其他已封存的正式运行', code: 'compare_no_base' } }),
|
||||
list: () => ({ json: [RUNS[T], RUNS[U]] }) })
|
||||
@@ -991,8 +1113,7 @@ await section('不属于已保存工作流的运行:对比页的说明前后
|
||||
try {
|
||||
// 只带本次:服务端找不到基准(这种运行没有可比的)
|
||||
const lone = await open(comparePath(T), { base: () => ({ status: 404, json: {
|
||||
detail: '没有找到可以对比的上一次运行:需要同一工作流、同一运行类别(定时任务发起的优先找同一定时任务)、更早结束并已封存的运行',
|
||||
code: 'compare_no_base' } }) })
|
||||
detail: NO_BASE_SERVER, code: 'compare_no_base' } }) })
|
||||
await settled(lone.page, 'error')
|
||||
await until(async () => (await lone.page.locator('[data-compare-run="base"]').innerText()).includes('未保存或已删除'), 3000)
|
||||
const card = (await lone.page.locator('[data-compare-run="base"]').innerText()).replace(/\s+/g, ' ')
|
||||
|
||||
+193
-20
@@ -1,6 +1,7 @@
|
||||
// 审批质询的回归检查:报告上的入口(run/EvidenceDoc.tsx 的句末「质询」、划选原文浮出的「质询」)、问答串和提问框
|
||||
// (run/Inquiry.tsx)、审批卡上的挂法(run/ApprovalReport.tsx、run/RunPanel.tsx)、运行详情「证据」页签的挂法
|
||||
// (pages/runs/EvidencePane.tsx)。
|
||||
// (pages/runs/EvidencePane.tsx),以及运行详情「工件」页签里质询回答的名字(pages/runs/model.ts)和航迹跳转
|
||||
// (pages/runs/ArtifactsPane.tsx)。
|
||||
//
|
||||
// 守的是这些「看着没坏、其实用不了」的地方:悬停、键盘聚焦一句都不出「质询」(或者出了 Tab 却到不了、整份报告多出一串
|
||||
// Tab 位)、没有可点内容的句子键盘走不到、划选原文不浮出入口(或者带上的原文混进了徽标和「质询」本身)、提交的请求体
|
||||
@@ -8,11 +9,15 @@
|
||||
// 进入审批卡时问答串没有恢复、问答串写不出问的是哪一句、回答里的数字点了不去取质询工件(或者每点一次取一次、标不出
|
||||
// 那一格)、引用报告已有出处的数字点了没反应、查询的 SQL / 行数 / 截断 / 遮罩不显示、触顶和没答成不说、recorded 为假
|
||||
// 不醒目、409 / 422 不照服务端的中文说明显示(或者问题文字丢了)、Esc 关不掉提问框(或者连带收起了别的、焦点掉到页面上)、
|
||||
// 已处理的审批和封存了的正式运行还给入口、封存了的探索运行反而没有;窄屏(390px)被撑出横向滚动、浅色主题下看不清。
|
||||
// 已处理的审批和封存了的正式运行还给入口、封存了的探索运行反而没有;同一次运行的几处问答串要对的审批不同、审批列表
|
||||
// 取不到时后一处一直不列别的审批里问的(头上写着次数,下面一条没有),或者把没能确认的说成「报告其他版本」、不给重试;
|
||||
// 工件页签里质询的回答只写英文的种类名、截断截在空格上的问题摘要不补省略号、封存后追加的工件给一个跳到运行结束之后的
|
||||
// 航迹时刻;窄屏(390px)被撑出横向滚动、浅色主题下看不清。
|
||||
//
|
||||
// 跑在预览页上:/preview.html?syn=inquiry-*(用例见 frontend/src/dev/fixtures/inquiry.tsx)。夹具在
|
||||
// frontend/src/dev/fixtures/inquiry.json,报告文档和回答文档是后端 build_catalog + compose_doc 真实组装的(虚构的数据)。
|
||||
// 质询的三个接口、工件、证据图、片段接口都在这里伪造;别的写请求一律拦掉并记下来,别的 GET 答 404,不碰真实服务。
|
||||
// 质询的三个接口、工件、证据图、片段接口、审批列表、运行的工件列表都在这里伪造;别的写请求一律拦掉并记下来,别的 GET
|
||||
// 答 404,不碰真实服务。
|
||||
//
|
||||
// node scripts/check-inquiry.mjs
|
||||
// 对别的实例跑时带上地址:AGENTLAB_WEB=http://localhost:<前端端口> node scripts/check-inquiry.mjs
|
||||
@@ -66,8 +71,9 @@ const answerFor = (body, extra = {}) => ({
|
||||
/**
|
||||
* 开一个预览用例。列表按运行答夹具里的问答(state.lists 可改),提问按 state.reply 答({status, json} 或按请求体算的函数;
|
||||
* state.gate 是个没兑现的 Promise 时先挂着,测「回答期间」;state.listGate 同样挂着列表)。审批列表按 state.approvals
|
||||
* (运行 → 审批数组)答,设置按 state.settings 答;state.docs、state.snaps 盖过夹具里的文档、快照。setup 在打开页面之前
|
||||
* 改 state(进入时就要取的列表、设置得先备好);ws 接管运行的事件流。记下列表、提问、取快照、取工件、取审批列表的请求和拦下的写请求
|
||||
* (运行 → 审批数组)答,没有的答 404,state.approvalsGate 同样先挂着;设置按 state.settings 答;state.docs、state.snaps
|
||||
* 盖过夹具里的文档、快照;运行的工件列表答夹具里的 run_artifacts(探索运行)。setup 在打开页面之前改 state(进入时就要
|
||||
* 取的列表、设置得先备好);ws 接管运行的事件流。记下列表、提问、取快照、取工件、取审批列表的请求和拦下的写请求
|
||||
*/
|
||||
async function open(syn, { width = 1100, height = 900, theme = 'dark', setup, ws, waitUntil = 'networkidle' } = {}) {
|
||||
const ctx = await browser.newContext({ viewport: { width, height }, colorScheme: theme, timezoneId: 'Asia/Shanghai' })
|
||||
@@ -79,6 +85,7 @@ async function open(syn, { width = 1100, height = 900, theme = 'dark', setup, ws
|
||||
reply: (body) => ({ status: 200, json: answerFor(body) }),
|
||||
gate: null,
|
||||
listGate: null,
|
||||
approvalsGate: null,
|
||||
approvals: {},
|
||||
settings: {},
|
||||
docs: {},
|
||||
@@ -114,6 +121,7 @@ async function open(syn, { width = 1100, height = 900, theme = 'dark', setup, ws
|
||||
if (path === '/api/approvals') {
|
||||
const run = url.searchParams.get('run_id')
|
||||
hits.approvals.push({ run, status: url.searchParams.get('status') })
|
||||
if (state.approvalsGate) await state.approvalsGate
|
||||
const list = state.approvals[run]
|
||||
return list ? route.fulfill({ json: list }) : route.fulfill({ status: 404, json: { detail: '检查脚本没有伪造这个接口' } })
|
||||
}
|
||||
@@ -141,6 +149,8 @@ async function open(syn, { width = 1100, height = 900, theme = 'dark', setup, ws
|
||||
hits.segments.push(decodeURIComponent(seg[2]))
|
||||
return route.fulfill({ json: {} })
|
||||
}
|
||||
const arts = path.match(/^\/api\/runs\/([^/]+)\/artifacts$/)
|
||||
if (arts) return route.fulfill({ json: decodeURIComponent(arts[1]) === RUNS.explore ? fx.run_artifacts : [] })
|
||||
const graph = path.match(/^\/api\/runs\/([^/]+)\/evidence$/)
|
||||
if (graph) {
|
||||
const run = decodeURIComponent(graph[1])
|
||||
@@ -822,6 +832,53 @@ await section('运行详情「证据」页签:封存了的探索运行有入
|
||||
}
|
||||
})
|
||||
|
||||
await section('运行详情「工件」页签:质询的回答有名字和说明,不出现英文的工件种类名;封存后追加的不给航迹跳转', async () => {
|
||||
const { ctx, page, errors } = await open('inquiry-run-artifacts')
|
||||
await page.locator('[data-run-artifacts] [data-artifact-id]').first().waitFor()
|
||||
// 每一行:种类(行首的标签)、说明(同一种类有几件时末尾带「#n」,去掉再比)、悬停
|
||||
const rows = await page.locator('[data-artifact-id]').evaluateAll((els) => els.map((el) => {
|
||||
const open = el.querySelector('[data-action="artifact-open"]')
|
||||
const spans = open ? [...open.children] : []
|
||||
return { id: el.getAttribute('data-artifact-id'), kind: spans[0]?.textContent?.trim() ?? '',
|
||||
about: (spans[1]?.textContent ?? '').replace(/\s*#\d+$/, '').trim(), title: open?.getAttribute('title') ?? '' }
|
||||
}))
|
||||
const answers = fx.run_artifacts.filter((a) => a.kind === 'inquiry_answer').map((a) => rows.find((r) => r.id === a.id))
|
||||
check('质询的回答:种类写「质询回答」', answers.length === 4 && answers.every((r) => r?.kind === '质询回答'), JSON.stringify(answers))
|
||||
check('有问题摘要的:说明写「质询「问题」的回答」', answers[0]?.about === '质询「退款率怎么算的?」的回答', answers[0]?.about)
|
||||
check('问题摘要满 40 字(服务端只记前 40 字):末尾补省略号',
|
||||
answers[1]?.about === '质询「枫岭区的销售额是否包含线上订单?如果包含,线上订单按下单门店还是按收货地址归到片…」的回答', answers[1]?.about)
|
||||
check('没有问题摘要的:也有一句说明', answers[2]?.about === '审批质询的回答:逐段的片段和每个数字的出处', answers[2]?.about)
|
||||
// 第 40 个字是空格:服务端截下来的摘要以空格结尾(截之前整个问题已经去过首尾空白),去掉空白再数只有 39 字
|
||||
check('截断截在空格上的摘要:照样补省略号,不当成完整的问题',
|
||||
answers[3]?.about === '质询「本周枫岭片区 GMV 环比下降了多少?下降的主要原因是不是 SKU 结构的变化…」的回答', answers[3]?.about)
|
||||
// 航迹跳转:运行期间产出的报告文档能跳到航迹里那一刻;封存后追加的质询回答和它查询的快照晚于运行结束,航迹里没有
|
||||
// 那一刻(以前给「T+」几十分钟、几天的跳转,点了把航迹拖到运行早就结束之后),只写时间
|
||||
const moments = Object.fromEntries(await page.locator('[data-artifact-id]').evaluateAll((els) => els.map((el) =>
|
||||
[el.getAttribute('data-artifact-id'), el.querySelector('[data-action="artifact-moment"]')?.textContent?.trim() ?? null])))
|
||||
const doc = fx.run_artifacts.find((a) => a.kind === 'report_doc')
|
||||
const late = fx.run_artifacts.filter((a) => a.kind !== 'report_doc')
|
||||
check('运行期间产出的报告文档:给航迹跳转', /^T\+/.test(moments[doc.id] ?? ''), moments[doc.id])
|
||||
check('封存后追加的质询回答、它查询的快照:不给航迹跳转,只写时间', late.every((a) => moments[a.id] === null)
|
||||
&& (await page.locator(`[data-artifact-id="${late[0].id}"] > span`).last().innerText()).trim() !== '',
|
||||
JSON.stringify(late.map((a) => moments[a.id])))
|
||||
await page.locator(`[data-artifact-id="${doc.id}"] [data-action="artifact-moment"]`).click()
|
||||
const jumped = await page.locator('[data-fixture="inquiry-run-artifacts"]').getAttribute('data-fixture-moment')
|
||||
check('……点报告文档的跳转:到它产出的那一刻', Number(jumped) === Date.parse(`${doc.created_at}Z`), jumped)
|
||||
check('悬停写「打开质询回答」', answers.every((r) => r?.title.startsWith('打开质询回答')), answers.map((r) => r?.title).join(' / '))
|
||||
const pane = await text(page.locator('[data-run-artifacts]'))
|
||||
check('工件页签里不出现英文的工件种类名', !/inquiry_answer|report_doc|query_snapshot/.test(pane) && rows.every((r) => !/[a-z_]{4,}/.test(r.kind)),
|
||||
rows.map((r) => r.kind).join('、'))
|
||||
check('不挂在节点上的写「不属于某个节点」', (await text(page.locator('[data-artifact-group=""] h3'))).startsWith('不属于某个节点'))
|
||||
// 打开一件:弹窗标题也是中文的种类名
|
||||
await page.locator(`[data-artifact-id="${answers[0]?.id}"] [data-action="artifact-open"]`).click()
|
||||
const dialog = page.getByRole('dialog')
|
||||
await dialog.waitFor()
|
||||
const head = await text(dialog.locator('h2').first())
|
||||
check('打开的弹窗标题写「质询回答」,不写英文', head.includes('质询回答') && !head.includes('inquiry_answer'), head)
|
||||
check('页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
})
|
||||
|
||||
await section('有表格的报告:悬停句子、表格的格子都不挪动排版;表格的格子不挂「质询」', async () => {
|
||||
// 报告文档换成带表格的那份(run/__tests__/evidence-doc.json):表里带出处的格子也是结论句
|
||||
const ev = JSON.parse(readFileSync(`${root}frontend/src/run/__tests__/evidence-doc.json`, 'utf8'))
|
||||
@@ -1026,12 +1083,18 @@ await section('之前几轮审批里问的:报告改写过的不按句子编
|
||||
check('页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
{
|
||||
// 审批列表取不到:别的审批里问的一律单独一组(宁可不挂,不挂错)
|
||||
const { ctx, page, errors } = await open('inquiry-approval', { setup: (s) => { s.lists[RUNS.approve] = [prev, level, ...fx.items] } })
|
||||
// 审批列表取不到:别的审批里问的一律单独一组(宁可不挂,不挂错)。不知道是哪一稿,不能说成「其他版本」(审批人会以为
|
||||
// 报告换过稿):写明没能确认、给重试。这里用浅色主题量那句的颜色(深色在下一段量)
|
||||
const { ctx, page, errors } = await open('inquiry-approval', { theme: 'light', setup: (s) => { s.lists[RUNS.approve] = [prev, level, ...fx.items] } })
|
||||
await entry(page, 12).waitFor()
|
||||
const g = await groupsOf(page)
|
||||
check('审批列表取不到:别的审批里问的都单独一组', JSON.stringify(g.at(-1)) !== undefined && g.at(-1).unit === 'other'
|
||||
check('审批列表取不到:别的审批里问的都单独一组', JSON.stringify(g.at(-1)) !== undefined && g.at(-1).unit === 'unsure'
|
||||
&& JSON.stringify(g.at(-1).entries) === JSON.stringify(['12', '20']), JSON.stringify(g.map((x) => [x.unit, x.entries])))
|
||||
check('审批列表取不到:那一组写「无法确认提问时的报告版本」,不说「其他版本」,给重试',
|
||||
g.at(-1)?.about.startsWith('无法确认提问时的报告版本') && !g.at(-1)?.about.includes('其他版本')
|
||||
&& await group(page, 'unsure').locator('[data-inquiry-docs-retry]').count() === 1, g.at(-1)?.about)
|
||||
const unsureRatio = await ratioOf(page, '[data-inquiry-group="unsure"] [data-inquiry-about-text]')
|
||||
check('审批列表取不到(浅色):那一句对比度 ≥ 4.5', unsureRatio >= 4.5, unsureRatio.toFixed(2))
|
||||
check('审批列表取不到:页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
}
|
||||
@@ -1054,6 +1117,96 @@ await section('之前几轮审批里问的:报告改写过的不按句子编
|
||||
}
|
||||
})
|
||||
|
||||
/** 一处问答串:抬头写的次数、实际列出的条数 */
|
||||
const tally = async (page, scope) => ({
|
||||
head: (await page.locator(`${scope} [data-inquiry-count]`).getAttribute('data-inquiry-count').catch(() => null)) ?? '',
|
||||
shown: await page.locator(`${scope} [data-inquiry-entry]`).count(),
|
||||
})
|
||||
|
||||
await section('两处要对的审批不同、审批列表取不到:两处的问答都列出来,次数和条数一致,写明没能确认、重试取到后各归其位', async () => {
|
||||
// 一张卡审两份报告:写月报上有 ap-x 里问的,写周报上有 ap-y 里问的,两份报告的问答串共用这次运行的审批列表。先发的那一处
|
||||
// 请求还在路上时,后一处要对的审批也得记上:不然请求回来(这里是 404)之后后一处一直等着,头上写「· 1 次」,下面一条没有
|
||||
const x = { ...clone(fx.items[0]), seq: 41, approval_id: 'ap-x', question: '写月报上一轮问的:退款率怎么算?', at: '2026-10-05T05:30:00Z' }
|
||||
const y = { ...clone(fx.items[1]), seq: 42, report: 'write2', approval_id: 'ap-y', question: '写周报上一轮问的:新客怎么界定?',
|
||||
at: '2026-10-05T05:35:00Z' }
|
||||
let release
|
||||
// 审批列表压着,页面等不到网络空闲:打开到 load 就往下走
|
||||
const { ctx, page, hits, errors } = await open('inquiry-approval-two', { waitUntil: 'load', setup: (s) => {
|
||||
s.lists[RUNS.approve] = [x, y]
|
||||
s.approvalsGate = new Promise((r) => { release = r })
|
||||
} })
|
||||
// 两份报告的问答串都取回来了(头上写着次数),审批列表的请求还压着
|
||||
await page.locator('[data-inquiry="write"] [data-inquiry-count]').waitFor()
|
||||
await page.locator('[data-inquiry="write2"] [data-inquiry-count]').waitFor()
|
||||
await until(() => hits.approvals.length >= 1)
|
||||
await page.waitForTimeout(200)
|
||||
release()
|
||||
const both = await until(async () => (await tally(page, '[data-inquiry="write"]')).shown === 1
|
||||
&& (await tally(page, '[data-inquiry="write2"]')).shown === 1)
|
||||
const [gw, gw2] = [await groupsOf(page, '[data-inquiry="write"]'), await groupsOf(page, '[data-inquiry="write2"]')]
|
||||
check('写月报:审批列表没取到,那张审批里问的单独一组(没能确认)', JSON.stringify(gw.map((g) => [g.unit, g.entries])) === JSON.stringify([['unsure', ['41']]]),
|
||||
JSON.stringify(gw.map((g) => [g.unit, g.entries])))
|
||||
check('写周报:请求是另一处先发的,回来之后照样列出、单独一组', both
|
||||
&& JSON.stringify(gw2.map((g) => [g.unit, g.entries])) === JSON.stringify([['unsure', ['42']]]), JSON.stringify(gw2.map((g) => [g.unit, g.entries])))
|
||||
const [tw, tw2] = [await tally(page, '[data-inquiry="write"]'), await tally(page, '[data-inquiry="write2"]')]
|
||||
check('两份报告头上的次数都和列出的条数一致', tw.head === '1' && tw.shown === 1 && tw2.head === '1' && tw2.shown === 1,
|
||||
JSON.stringify({ tw, tw2 }))
|
||||
check('按运行只取一次审批列表(一份列表里各张审批都有)', hits.approvals.length === 1, JSON.stringify(hits.approvals))
|
||||
check('页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
{
|
||||
// 运行详情直接打开「证据」页签、运行停在审批上:时间线里的待审批卡只为更早那一轮(ap-inq-0)取审批列表,证据页签不认
|
||||
// 任何审批,ap-inq-0 和这张卡的 ap-inq-1 都要对。卡那一处先发了请求,证据页签那一处的条目在请求回来之后也得列出来
|
||||
const early = { ...clone(fx.items[0]), seq: 12, approval_id: 'ap-inq-0', question: '上一轮:退款率 3.5% 是怎么算的?', at: '2026-10-05T05:40:00Z' }
|
||||
const { ctx, page, hits, state, errors } = await open('inquiry-run-waiting', { waitUntil: 'load', setup: (s) => {
|
||||
s.lists[RUNS.approve] = [early, clone(fx.items[1])]
|
||||
s.approvalsGate = new Promise((r) => { release = r })
|
||||
} })
|
||||
const card = '[data-fixture-card] [data-inquiry="write"]'
|
||||
const pane = '[data-fixture-evidence] [data-inquiry="write"]'
|
||||
await page.locator(`${card} [data-inquiry-count]`).waitFor()
|
||||
await page.locator(`${pane} [data-inquiry-count]`).waitFor()
|
||||
await until(() => hits.approvals.length >= 1)
|
||||
await page.waitForTimeout(200)
|
||||
release()
|
||||
const listed = await until(async () => (await tally(page, card)).shown === 2 && (await tally(page, pane)).shown === 2)
|
||||
const [gc, gp] = [await groupsOf(page, card), await groupsOf(page, pane)]
|
||||
check('待审批卡:这张审批里问的挂句子下面,没能确认的那一轮单独一组',
|
||||
JSON.stringify(gc.map((g) => [g.unit, g.entries])) === JSON.stringify([['u3', ['34']], ['unsure', ['12']]]),
|
||||
JSON.stringify(gc.map((g) => [g.unit, g.entries])))
|
||||
check('证据页签:两条都列出来,没能确认的单独一组(不再一直等着)', listed
|
||||
&& JSON.stringify(gp.map((g) => [g.unit, g.entries])) === JSON.stringify([['unsure', ['12', '34']]]), JSON.stringify(gp.map((g) => [g.unit, g.entries])))
|
||||
const [tc, tp] = [await tally(page, card), await tally(page, pane)]
|
||||
check('两处头上的次数都和列出的条数一致', tc.head === '2' && tc.shown === 2 && tp.head === '2' && tp.shown === 2, JSON.stringify({ tc, tp }))
|
||||
check('运行详情:按运行只取一次审批列表', hits.approvals.length === 1, JSON.stringify(hits.approvals))
|
||||
// 没读到审批记录不能说成「其他版本」:卡上同一条挂在句子下面,下面证据页签却说是别的版本,审批人会以为报告换过稿
|
||||
const heads = (await page.locator('[data-inquiry-group="unsure"] [data-inquiry-about-text]').allInnerTexts()).map((t) => t.trim())
|
||||
check('没能确认的那一组(两处):写「无法确认提问时的报告版本」,不说「其他版本」',
|
||||
heads.length === 2 && heads.every((t) => t === '无法确认提问时的报告版本'), heads.join(' | '))
|
||||
check('……两处都给「重试」', await page.locator(`${card} [data-inquiry-group="unsure"] [data-inquiry-docs-retry]`).count() === 1
|
||||
&& await page.locator(`${pane} [data-inquiry-group="unsure"] [data-inquiry-docs-retry]`).count() === 1)
|
||||
const unsureRatio = await ratioOf(page, `${pane} [data-inquiry-group="unsure"] [data-inquiry-about-text]`)
|
||||
check('……那一句(深色)对比度 ≥ 4.5', unsureRatio >= 4.5, unsureRatio.toFixed(2))
|
||||
// 重试,这回取得到:这张审批审的就是眼前这一稿,更早那一轮审的是另一稿
|
||||
state.approvals[RUNS.approve] = [approvalRow(fx.approval_id, RUNS.approve, fx.reports.approve.doc_artifact),
|
||||
approvalRow('ap-inq-0', RUNS.approve, '0'.repeat(64))]
|
||||
await page.locator(`${pane} [data-inquiry-docs-retry]`).click()
|
||||
const want = JSON.stringify([['u3', ['34']], ['other', ['12']]])
|
||||
const placed = await until(async () => JSON.stringify((await groupsOf(page, pane)).map((g) => [g.unit, g.entries])) === want
|
||||
&& JSON.stringify((await groupsOf(page, card)).map((g) => [g.unit, g.entries])) === want)
|
||||
const [gc2, gp2] = [await groupsOf(page, card), await groupsOf(page, pane)]
|
||||
check('重试取到之后(证据页签):这张审批里问的回到句子下面,更早那一轮算报告其他版本', placed
|
||||
&& JSON.stringify(gp2.map((g) => [g.unit, g.entries])) === want, JSON.stringify(gp2.map((g) => [g.unit, g.entries])))
|
||||
check('重试取到之后(待审批卡):更早那一轮也改写成报告其他版本', JSON.stringify(gc2.map((g) => [g.unit, g.entries])) === want
|
||||
&& gc2.at(-1)?.about.startsWith('报告其他版本上的质询'), JSON.stringify(gc2.map((g) => [g.unit, g.about.slice(0, 12)])))
|
||||
check('……重试只再取一次审批列表,两处共用', hits.approvals.length === 2, JSON.stringify(hits.approvals))
|
||||
const [tc2, tp2] = [await tally(page, card), await tally(page, pane)]
|
||||
check('……两处的次数仍和条数一致', tc2.head === '2' && tc2.shown === 2 && tp2.head === '2' && tp2.shown === 2, JSON.stringify({ tc2, tp2 }))
|
||||
check('运行详情:页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
}
|
||||
})
|
||||
|
||||
await section('回答期间另开了提问框,正在回答的那一条没问成:新写的不被覆盖', async () => {
|
||||
const { ctx, page, state, errors } = await open('inquiry-approval')
|
||||
await expand(page)
|
||||
@@ -1273,18 +1426,23 @@ function contrast(fg, bg, base) {
|
||||
return (Math.max(a, b) + 0.05) / (Math.min(a, b) + 0.05)
|
||||
}
|
||||
|
||||
/** 某个元素的字色对它所在那一块底色的对比度:底色往上找第一个不透明的,最底下是 body */
|
||||
const ratioOf = (page, sel) => page.evaluate((s) => {
|
||||
const el = document.querySelector(s)
|
||||
if (!el) return null
|
||||
let bgEl = el
|
||||
let bg = 'rgba(0, 0, 0, 0)'
|
||||
while (bgEl && /rgba\(0, 0, 0, 0\)|transparent/.test(bg)) {
|
||||
bg = getComputedStyle(bgEl).backgroundColor
|
||||
bgEl = bgEl.parentElement
|
||||
}
|
||||
return { fg: getComputedStyle(el).color, bg, base: getComputedStyle(document.body).backgroundColor }
|
||||
}, sel).then((c) => (c ? contrast(c.fg, c.bg, c.base) : 0))
|
||||
/**
|
||||
* 某个元素的字色对它所在那一块底色的对比度:底色往上找第一个不透明的,最底下是 body。写成函数声明:前面几段(审批列表
|
||||
* 取不到的那一组)也要用
|
||||
*/
|
||||
function ratioOf(page, sel) {
|
||||
return page.evaluate((s) => {
|
||||
const el = document.querySelector(s)
|
||||
if (!el) return null
|
||||
let bgEl = el
|
||||
let bg = 'rgba(0, 0, 0, 0)'
|
||||
while (bgEl && /rgba\(0, 0, 0, 0\)|transparent/.test(bg)) {
|
||||
bg = getComputedStyle(bgEl).backgroundColor
|
||||
bgEl = bgEl.parentElement
|
||||
}
|
||||
return { fg: getComputedStyle(el).color, bg, base: getComputedStyle(document.body).backgroundColor }
|
||||
}, sel).then((c) => (c ? contrast(c.fg, c.bg, c.base) : 0))
|
||||
}
|
||||
|
||||
await section('窄屏与深浅色', async () => {
|
||||
for (const theme of ['dark', 'light']) {
|
||||
@@ -1366,6 +1524,21 @@ await section('窄屏与深浅色', async () => {
|
||||
check('390px 运行详情:页面没有报错', errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
}
|
||||
for (const theme of ['dark', 'light']) {
|
||||
// 运行详情「工件」页签:质询回答的说明可能很长(问题的前 40 字),窄屏上截断、不撑宽;种类和说明深浅色都看得清
|
||||
const { ctx, page, errors } = await open('inquiry-run-artifacts', { width: 390, height: 844, theme })
|
||||
const long = fx.run_artifacts.find((a) => a.kind === 'inquiry_answer' && [...(a.meta.question ?? '')].length >= 40)
|
||||
const row = `[data-artifact-id="${long.id}"] [data-action="artifact-open"]`
|
||||
await page.locator(row).waitFor()
|
||||
const o = await overflow(page, '[data-run-artifacts]')
|
||||
const ratios = { kind: await ratioOf(page, `${row} > span:nth-child(1)`), about: await ratioOf(page, `${row} > span:nth-child(2)`) }
|
||||
check(`390px 工件页签(${theme}):质询回答的长说明截断、不横向溢出,种类和说明对比度 ≥ 4.5`,
|
||||
o.page <= 0 && o.box <= 0 && ratios.kind >= 4.5 && ratios.about >= 4.5,
|
||||
JSON.stringify({ o, kind: Number(ratios.kind.toFixed(2)), about: Number(ratios.about.toFixed(2)) }))
|
||||
await shot(page, `run-artifacts-narrow-${theme}`)
|
||||
check(`390px 工件页签(${theme}):页面没有报错`, errors.length === 0, errors.join(';'))
|
||||
await ctx.close()
|
||||
}
|
||||
})
|
||||
|
||||
await browser.close()
|
||||
|
||||
@@ -5,9 +5,10 @@
|
||||
// 立即运行之后没有下文、触发历史只有一页、保存过的 Webhook 地址又被原样显示出来、改了别的字段却把地址清掉、
|
||||
// 记录页看不出哪些运行来自定时任务、390px 窄屏被表单撑出横向滚动。运行成功结束后的自动对比:触发历史里「与上一次
|
||||
// 对比」(和运行详情「更多」菜单同一个叫法)链到对比页,旁边写有几个指标有变化,悬停只写各类指标的个数,基准不是
|
||||
// 紧挨着的上一次时写明是哪一次、不带「默认基准」的来历;运行详情页头的「由定时任务「X」发起」是键盘到得了的真链接
|
||||
// (记录页的「定时」标记在整行按钮里,只能鼠标点),带日历图标,窄窗口里(768、820、900 宽,探索运行多一个「提取为
|
||||
// 草稿」)不被挤没,定时任务删掉之后写成纯文本。
|
||||
// 紧挨着的上一次时链接上看得见的字写「与上一次成功的运行对比」、悬停写明是哪一次;两种都带「默认基准:同一定时任务
|
||||
// 上一次成功的运行」的来历,和运行详情「更多」里的同名入口打开同一对运行(服务端用同一个函数挑基准)。运行详情页头的
|
||||
// 「由定时任务「X」发起」是键盘到得了的真链接(记录页的「定时」标记在整行按钮里,只能鼠标点),带日历图标,窄窗口里
|
||||
// (768、820、900 宽,探索运行多一个「提取为草稿」)不被挤没,定时任务删掉之后写成纯文本。
|
||||
// 还有几处时序和口径:晚到的刷新把刚切换的开关盖回去、先开触发历史再开设置时带着旧版本撞假的 409、保存途中又改了
|
||||
// 别的字段时替换过的地址明文留在框里、服务端会拒的组合(未发布 + 正式运行、必填没填、已发布版本里没有的字段)
|
||||
// 照样放行、测试消息的结果把服务端的整句又套一层、错过已跳过的那条悬停另说一个原因(和本条记的原因对不上)。
|
||||
@@ -267,9 +268,15 @@ await section('纯函数:服务端会拒的组合、保存回来怎么接、
|
||||
check(`测试结果:服务端给整句、给补充说明都只说一遍(${tests.length} 种)`, !wrong.length, wrong.map(([r]) => t(r)).join(';'))
|
||||
})
|
||||
|
||||
/** 对比页写的默认基准来历(定时任务发起的):只挑比本次先发起、成功结束并封存的运行,服务端 api/compare.py 的 pick_base */
|
||||
const REASON_SCHEDULE = '默认基准:同一定时任务上一次成功的运行'
|
||||
|
||||
await section('纯函数:触发历史对比的文案', async () => {
|
||||
const { SCHEDULE_TEXT: T, RUN_COMPARE_TEXT: C } = await import(await load('/src/lib/terms.ts'))
|
||||
check('「与上一次对比」和运行详情「更多」菜单同一个叫法', T.compareLink === C.menu && T.compareLink === '与上一次对比', T.compareLink)
|
||||
check('基准不是紧挨着的上一次时的叫法:与上一次成功的运行对比', T.compareLinkLastOk === '与上一次成功的运行对比', T.compareLinkLastOk)
|
||||
check('默认基准的来历照服务端的挑法写「上一次成功的运行」', C.reason.same_schedule === REASON_SCHEDULE
|
||||
&& C.reason.same_workflow === '默认基准:同一工作流、同一运行类别上一次成功的运行', JSON.stringify(C.reason))
|
||||
const zero = { unchanged: 0, data_only: 0, caliber_and_data: 0, sql_changed: 0, params_only: 0, added: 0, removed: 0, incomparable: 0 }
|
||||
const cases = [
|
||||
['有变化的几类合起来', { ...zero, data_only: 3, caliber_and_data: 1, params_only: 2, unchanged: 4 }, '6 个指标有变化'],
|
||||
@@ -1462,6 +1469,11 @@ await section('详情:触发历史里的「与上一次对比」', async () =>
|
||||
const f10 = row('f10').locator('[data-fire-compare]')
|
||||
const t10 = (await f10.getAttribute('title').catch(() => '')) ?? ''
|
||||
check('上一次失败了、基准是再往前成功的那次:悬停写明是哪一次', t10.startsWith('与上一次成功的运行(#run-f1)相比:只数据变 1 个'), t10)
|
||||
// 触屏没有悬停、键盘聚焦也不显示 title:比的不是上一次这件事得写在看得见的字里
|
||||
const l10 = f10.locator('[data-fire-compare-label]')
|
||||
check('……链接上看得见的字写「与上一次成功的运行对比」,不只靠悬停', (await l10.innerText().catch(() => '')).trim() === '与上一次成功的运行对比'
|
||||
&& await l10.isVisible(), (await l10.innerText().catch(() => '没有')).trim())
|
||||
check('……紧挨着的上一次那一行照旧写「与上一次对比」', (await row('f00').locator('[data-fire-compare-label]').innerText()).trim() === '与上一次对比')
|
||||
const linked = await page.locator('[data-fire-compare]').evaluateAll((els) => els.map((e) => e.closest('[data-fire-id]')?.getAttribute('data-fire-id')))
|
||||
check('没有对比的(compare 为 null、老服务端不给、没有运行)不给链接', JSON.stringify(linked) === '["f00","f08","f10"]', JSON.stringify(linked))
|
||||
check('运行链接照旧在', await row('f00').locator('a[href="/runs/run-f00"]').count() === 1)
|
||||
@@ -1475,21 +1487,78 @@ await section('详情:触发历史里的「与上一次对比」', async () =>
|
||||
})
|
||||
check('……回车打开对比页,带着本次和基准', !!url && url.searchParams.get('target') === 'run-f00'
|
||||
&& url.searchParams.get('base') === 'run-f02', page.url())
|
||||
// 来历跟着这一次跳转走(路由的 state),对比页据此写「默认基准:同一定时任务的上一次运行」
|
||||
// 来历跟着这一次跳转走(路由的 state),对比页据此写「默认基准:同一定时任务上一次成功的运行」
|
||||
const via = await page.evaluate(() => history.state?.usr ?? null)
|
||||
check('……紧挨着的上一次:带上「同一定时任务」的来历', via?.reason === 'same_schedule' && via?.base === 'run-f02', JSON.stringify(via))
|
||||
|
||||
// 基准不是紧挨着的上一次:来历照样带上。对比页写的是「上一次成功的运行」,比的正是这一次,和从运行详情进去一字不差
|
||||
const second = await open('/schedules/s-weekly?tab=history')
|
||||
await second.page.locator('[data-fire-id="f10"] [data-fire-compare]').click()
|
||||
await second.page.locator('[data-fire-id="f10"] [data-fire-compare]').focus()
|
||||
const focusedLabel = await second.page.evaluate(() => document.activeElement?.querySelector('[data-fire-compare-label]')?.textContent?.trim() ?? '')
|
||||
check('……键盘聚焦在那一行的链接上时,看得见的字就是「与上一次成功的运行对比」', focusedLabel === '与上一次成功的运行对比', focusedLabel)
|
||||
await second.page.keyboard.press('Enter')
|
||||
await until(() => new URL(second.page.url()).pathname === '/runs/compare')
|
||||
const via10 = await second.page.evaluate(() => history.state?.usr ?? null)
|
||||
check('……基准不是紧挨着的上一次:不带来历,对比页不说「上一次」', new URL(second.page.url()).searchParams.get('base') === 'run-f12'
|
||||
&& via10 == null, JSON.stringify(via10))
|
||||
const reason10 = await until(async () => (await second.page.locator('[data-compare-reason]').innerText().catch(() => '')).trim())
|
||||
check('……基准不是紧挨着的上一次:带上来历,对比页写「同一定时任务上一次成功的运行」', new URL(second.page.url()).searchParams.get('base') === 'run-f12'
|
||||
&& via10?.reason === 'same_schedule' && via10?.base === 'run-f12' && reason10 === REASON_SCHEDULE, `${JSON.stringify(via10)} ${reason10}`)
|
||||
const real = [...writes(sent, /./), ...writes(second.sent, /./)].filter((x) => x.key !== 'POST /schedules/preview')
|
||||
check('只读:没有写请求', real.length === 0, real.map((x) => x.key).join('、'))
|
||||
check('没有页面报错', ![...errors, ...second.errors].length, [...errors, ...second.errors].join(' | '))
|
||||
})
|
||||
|
||||
await section('详情:触发历史和运行详情的「与上一次对比」拿同一个基准', async () => {
|
||||
// f10 的上一次(f11)失败了,服务端两处都挑再往前成功的 f12:自动对比和运行详情的默认基准用的是同一个函数
|
||||
// (api/compare.py 的 pick_base),基准事后变了的旧对比触发历史不再给,这些由 backend/tests/test_scheduler_compare.py
|
||||
// 守。这里守前端:两个入口都原样用服务端给的基准,打开同一对运行、写同一句来历
|
||||
const runOf = (id, at) => ({ ...RUNS[0], id, started_by: '定时任务:门店周报 · 每周', created_at: iso(at), started_at: iso(at),
|
||||
finished_at: iso(at + 4200), manifest_hash: 'ab'.repeat(32), manifest_seq: 2 })
|
||||
const f10 = runOf('run-f10', nextMonday9(-11))
|
||||
const f12 = runOf('run-f12', nextMonday9(-13))
|
||||
const ref = (r) => ({ id: r.id, workflow_name: r.workflow_name, version: r.version, run_class: r.run_class,
|
||||
started_at: r.started_at, finished_at: r.finished_at, schedule_id: r.schedule_id })
|
||||
const compareApi = (method, path, body, url) => {
|
||||
if (method !== 'GET') return null
|
||||
if (path === '/runs/run-f10/compare/base') return { json: { base_run_id: 'run-f12', reason: 'same_schedule', base: ref(f12) } }
|
||||
if (path === '/runs/run-f10/compare' && url.searchParams.get('base') === 'run-f12') {
|
||||
return { json: { target: ref(f10), base: ref(f12), summary: COMPARE_F10.summary, metrics: [], queries: [], notes: [],
|
||||
template: { base_version: 3, target_version: 3, same_graph: true, nodes: [] } } }
|
||||
}
|
||||
return null
|
||||
}
|
||||
const stateOf = () => ({ ...freshState({ runs: [...RUNS, f10, f12] }), override: compareApi })
|
||||
const landed = (page) => until(() => {
|
||||
const u = new URL(page.url())
|
||||
return u.pathname === '/runs/compare' ? u : null
|
||||
})
|
||||
const reasonOf = (page) => until(async () => (await page.locator('[data-compare-reason]').innerText().catch(() => '')).trim())
|
||||
|
||||
const menu = await open('/runs/run-f10', { state: stateOf() })
|
||||
await menu.page.locator('[data-run-detail="run-f10"]').waitFor({ timeout: 10000 })
|
||||
await menu.page.getByRole('button', { name: '更多操作' }).click()
|
||||
await menu.page.locator('[data-menu=compare]').click()
|
||||
const a = await landed(menu.page)
|
||||
const hist = await open('/schedules/s-weekly?tab=history', { state: stateOf() })
|
||||
const link = hist.page.locator('[data-fire-id="f10"] [data-fire-compare]')
|
||||
await link.waitFor()
|
||||
const label = (await link.locator('[data-fire-compare-label]').innerText()).trim()
|
||||
await link.click()
|
||||
const b = await landed(hist.page)
|
||||
check('运行详情「更多」和触发历史两个入口:打开同一对运行(本次 run-f10,基准是跳过失败那次的 run-f12)',
|
||||
!!a && !!b && a.searchParams.get('target') === 'run-f10' && b.searchParams.get('target') === 'run-f10'
|
||||
&& a.searchParams.get('base') === 'run-f12' && b.searchParams.get('base') === 'run-f12', `${a?.search} | ${b?.search}`)
|
||||
const [ra, rb] = [await reasonOf(menu.page), await reasonOf(hist.page)]
|
||||
check('……两处写的默认基准一字不差:同一定时任务上一次成功的运行', ra === REASON_SCHEDULE && rb === REASON_SCHEDULE, `${ra} | ${rb}`)
|
||||
check('……触发历史上看得见的字说明比的是上一次成功的运行', label === '与上一次成功的运行对比', label)
|
||||
const tiles = (page) => until(async () => (await page.locator('[data-compare-summary] [data-compare-class]').evaluateAll((els) =>
|
||||
els.map((e) => `${e.getAttribute('data-compare-class')}=${e.querySelector('[data-compare-count]')?.textContent?.trim()}`))).join(' '))
|
||||
const [ta, tb] = [await tiles(menu.page), await tiles(hist.page)]
|
||||
check('……两边的变化摘要一致', !!ta && ta === tb, `${ta} | ${tb}`)
|
||||
const real = [...writes(menu.sent, /./), ...writes(hist.sent, /./)]
|
||||
check('只读:没有写请求', real.length === 0, real.map((x) => x.key).join('、'))
|
||||
check('没有页面报错', ![...menu.errors, ...hist.errors].length, [...menu.errors, ...hist.errors].join(' | '))
|
||||
})
|
||||
|
||||
// ---------------------------------------------------------------- 运行详情
|
||||
|
||||
/**
|
||||
@@ -1739,6 +1808,8 @@ await section('窄屏 390px 与浅色', async () => {
|
||||
check(`${theme}:触发历史不横向溢出`, await overflow(hist.page) <= 1, `${await overflow(hist.page)}px`)
|
||||
check(`${theme}:「与上一次对比」和旁边的计数在屏幕里`, await inViewX(hist.page, '[data-fire-id="f00"] [data-fire-compare]')
|
||||
&& await inViewX(hist.page, '[data-fire-id="f00"] [data-fire-compare-count]'))
|
||||
check(`${theme}:更长的「与上一次成功的运行对比」连同计数也在屏幕里`, await inViewX(hist.page, '[data-fire-id="f10"] [data-fire-compare]')
|
||||
&& await inViewX(hist.page, '[data-fire-id="f10"] [data-fire-compare-count]'))
|
||||
const cmp = await readable(hist.page, '[data-fire-id="f00"] [data-fire-compare]')
|
||||
check(`${theme}:「与上一次对比」对比度 ≥ 4.5`, !!cmp && cmp.ratio >= 4.5, JSON.stringify(cmp))
|
||||
const cnt = await readable(hist.page, '[data-fire-id="f00"] [data-fire-compare-count]')
|
||||
|
||||
Reference in New Issue
Block a user