Yaojia Wang 51bfb6e320 test(qa): craft 成稿质量前后对照评估回路（灵感 F2） ...

固定 3 题材金标准输入（仙侠/都市/悬疑，各含最小 spec+world+outline 及开篇章），
经真实 assemble()+build_write_request() 组装 craft-on / craft-off 两版写章请求：

- dry 模式（默认，零成本、免真实 LLM，可进 CI）：断言 craft 教条块、genre 片段、
  开篇黄金三章 marker 确实按 fixture 注入正确内容，且 craft-off 基线不含这三者；
  并把两版将发送给模型的 prompt 并排 dump 供人眼看。这些断言即 tests/test_craft_eval.py，
  是 craft/审查注入路径的回归门禁。
- --live 模式（真实付费 LLM，绝不进 CI）：经 gateway 各生成一章 + analyst 五维裁判，
  凭据读 DB、路由走 tier_routing，与生产写章同一网关路径。

入口 `uv run python -m tests.craft_eval [--live]`；用法/成本/门禁说明见 README.md。

2026-07-06 17:57:31 +02:00

..

craft_eval

test(qa): craft 成稿质量前后对照评估回路（灵感 F2）

2026-07-06 17:57:31 +02:00

__init__.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

conftest.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

test_chain_continue_volume_e2e.py

fix(backlog): 修评审 3 HIGH — resume chain_key 真值 / 模板空白校验 / 续写链 resume E2E

2026-06-23 20:45:06 +02:00

test_chain_workflow_e2e.py

fix(chain): 修评审 CRITICAL+HIGH — 链网关按 session 重建/日志脱敏/resume 原子化+所有权/死导入

2026-06-23 18:04:10 +02:00

test_competitor_generators_e2e.py

test(qa): Scope B C — 4 竞品生成器 E2E（真 pg + mock 网关零 token）

2026-06-23 19:17:08 +02:00

test_craft_eval.py

test(qa): craft 成稿质量前后对照评估回路（灵感 F2）

2026-07-06 17:57:31 +02:00

test_error_envelope.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

test_health.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

test_jobs_integration.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

test_k1_kimi_oauth_e2e.py

fix(txn+security): 仓储改 flush + 启动校验/兜底 + job.error 脱敏 + SSE 异常硬化

2026-06-21 19:32:24 +02:00

test_m1_e2e.py

feat: M1 — 立项→写章草稿(SSE)→自动保存；连一家 provider

2026-06-18 11:38:28 +02:00

test_m2_e2e.py

feat: M2 — 写→审(一致性)→裁决→验收(事务)；未决冲突禁验收

2026-06-18 11:38:28 +02:00

test_m3_e2e.py

feat: M3 — 伏笔账本 + 节奏引擎 + 大纲（含并发记账 bugfix）

2026-06-18 14:21:17 +02:00

test_m4_e2e.py

fix(txn+security): 仓储改 flush + 启动校验/兜底 + job.error 脱敏 + SSE 异常硬化

2026-06-21 19:32:24 +02:00

test_m5_e2e.py

feat(character): appearance/motive 全栈穿线 + motive/traits 口径重切

2026-07-06 14:36:11 +02:00

test_openapi.py

feat: Phase 0 — monorepo 骨架 + 全表迁移 + FastAPI/Next 骨架 + CI

2026-06-18 11:38:28 +02:00

test_project_metadata_e2e.py

fix: address ui review follow-ups

2026-06-29 12:06:04 +02:00

test_prompt_externalize_regression.py

refactor(agents): prompt 外置方案A — 21 prompt 散文外迁 .md + SpecResolver

2026-06-24 04:49:44 +02:00

test_t6_toolbox_e2e.py

fix(scope-b): 修评审 4 HIGH + 同步 T6 工具数(15)

2026-06-23 19:38:56 +02:00

test_teardown_ingest_e2e.py

test(qa): F1/F2/F3 E2E — 拆书入 rules / 续写式链前文注入 / 模板库 CRUD

2026-06-23 20:24:24 +02:00

test_templates_e2e.py

test(qa): F1/F2/F3 E2E — 拆书入 rules / 续写式链前文注入 / 模板库 CRUD

2026-06-23 20:24:24 +02:00