mnote/scripts/TESTING_REFERENCE.md

mnote 测试参考

这份文档面向 /mnt/Data1T/mnote/scripts 目录下的现有测试脚本，目标不是重新设计测试体系，而是把当前已经在用的 smoke、回归脚本、截图取证和人工复核方式整理成一套可执行参考。

当前结论先说在前面：

• scripts/ 里的主力仍然是 Playwright smoke + Node 断言。
• 对 mnote 来说，最有价值的不是把所有测试都换成“浏览器插件式控制”，而是把已有 smoke 的结果变得更可看、更易复核。
• /doko 适合作为 smoke 之后的“真实页面直观复核层”，不是用来替代 smoke。
• 2026-05-20 起，默认主入口固定按 http://127.0.0.1:3000 理解；历史记录里的 3001 只代表当时临时 mnote-web 实例，不再作为默认验收入口。
• 历史 smoke 分为 current 与 retired/debug 两类维护；退役脚本不应进入默认回归，除非脚本自身要求显式环境变量。
• 2026-05-27 起，默认 smoke 基线只覆盖 3000 Rust SSR + leptos-tiptap + local-first 主路径；Convex export、Convex 兼容、Next、3104、BlockNote 默认路径脚本不再放在默认候选里。
• 依赖 /api/dev/seed 的 browser smoke 默认使用 npm run dev:hot；dev:hot 默认启用 MNOTE_WEB_ALLOW_DEV_FIXTURES=1，desktop:hot 与生产启动仍默认关闭。修改 Node 启动脚本或环境变量后必须重启 dev:hot 主进程，不能只等待 cargo-watch 重载 Rust。

0. 当前 smoke 状态清单

这一节用于避免历史脚本被误当作当前架构主链验收。

0.0 2026-05-26 默认基线

建议日常 smoke 先跑这一组，确保当前主入口、认证、文档 island、Page Aggregate、local-first 和关键 runtime surface 没断：

node scripts/task114-rust-web-gateway-entry-smoke.js
node scripts/task159-auth-entry-smoke.js
node scripts/task164-desktop-hot-local-folder-main-entry-smoke.js
node scripts/task166-local-first-managed-workspace-no-convex-smoke.js
node scripts/task167-local-markdown-title-body-options-no-convex-smoke.js
node scripts/task490-runtime-surfaces-smoke.js

其中 task490-runtime-surfaces-smoke.js 是轻量浏览器 smoke，验证页面设置、Page AI drawer 打开/关闭、Page AI stop-run abort、slash menu、block handle menu 能在当前 leptos-tiptap 文档页工作；它使用 mock run 覆盖停止按钮，不要求真实模型返回，也不替代更重的页面设置、OpenHub/Page AI 或编辑器菜单专项脚本。

0.1 当前主链优先脚本

• 入口与认证：task114-rust-web-gateway-entry-smoke.js、task159-auth-entry-smoke.js、task097-homepage-entry-smoke.js
• Rust SSR 文档页 / Page Aggregate：local-first 默认优先 task167-local-markdown-title-body-options-no-convex-smoke.js；Page Aggregate browser conversion / compat fallback 改动补跑 task522-page-aggregate-compat-fallback-contract.js；cloud/control-plane 文档可补跑 task110-page-title-single-truth-smoke.js、task-page-aggregate-body-sync-smoke.js、task-page-aggregate-options-sync-smoke.js、task-page-aggregate-refresh-persistence-smoke.js
• leptos-tiptap runtime surface：task490-runtime-surfaces-smoke.js；需要验证保存回读可补跑 task121-rust-web-editor-island-hydration-smoke.js，但它仍使用 /api/tree/commands create 准备文档，不作为无 Convex 默认基线；需要验证浮层互斥和更多菜单状态时再跑 task158-e30-menu-state-smoke.js
• local-first 本地工作区：task164-desktop-hot-local-folder-main-entry-smoke.js、task166-local-first-managed-workspace-no-convex-smoke.js、task167-local-markdown-title-body-options-no-convex-smoke.js、task436-local-markdown-open-document-external-change-smoke.js、task443-local-markdown-asset-upload-smoke.js、task451-local-markdown-conflict-resolution-ui-smoke.js、task452-local-search-index-browser-smoke.js、task453-local-folder-page-ai-changed-files-smoke.js；WorkspacePath / ObjectIdentity runtime 消费统一改动补跑 task524-workspace-object-identity-matrix-smoke.js。task452 只覆盖普通本地搜索、settings API、tag/backlink API 和旧 local-index UI 不复活；资料库问答、PDF/Office/image source ingestion 与引用回跳改跑 WeKnora / provider-neutral knowledge-rag 脚本。
• WeKnora / OpenHub 资料库：task781-knowledge-bases-registry-smoke.js、task785-weknora-create-kb-folder-ingest-search-smoke.js、task787-weknora-default-lightrag-legacy-smoke.js、task772-openhub-weknora-kb-ui-smoke.js 覆盖默认 provider、知识库列表、摄取、搜索、引用桥接与 legacy LightRAG guard。旧 task529/530/531/534 LightRAG 脚本只作为 legacy fallback / 历史对照，不进入默认回归。旧 task526-local-folder-ocr-api-smoke.js / OCR sidecar 链路已退役并软归档；/api/search/documents 不作为 WeKnora、LightRAG legacy、LiteParse、OCR sidecar 或 evidence.sqlite 的资料库问答 fallback。
• local Markdown conflict regression：task510-local-markdown-conflict-regression-group.js 串联真实冲突、连续上传、新建页面、外部恢复、多 tab CAS 与上传 409 孤儿策略；可用 MNOTE_CONFLICT_REGRESSION_TASKS=a.js,b.js 做定点子集。
• tree realtime / live cache：task446-tree-rename-dual-browser-live-smoke.js、task447-tree-move-order-dual-browser-live-smoke.js、task448-tree-resync-recovery-dual-browser-smoke.js、task449-tree-sse-reconnect-snapshot-recovery-smoke.js
• 资源对象与 mindmap：task455-local-folder-mindmap-clean-smoke.js、task456-resource-object-shell-sync-smoke.js、task166-mindmap-phase6-block-smoke.js、task167-mindmap-kmind-parity-smoke.js、task168-mindmap-put-validator-smoke.js；Page AI mindmap skill / 资源生成改动补跑 task503-mindmap-skill-capability-smoke.js，真实 mindmap resource tab / Page AI target 改动补跑 task525-page-ai-mindmap-resource-target-smoke.js
• Page AI / agent history / ChatOnly：task502-page-ai-agent-selector-context-smoke.js 覆盖 Page AI agent/context/target picker、skills source 和 run payload；opencode WebUI embed 改动补跑 task763-page-ai-opencode-embed-smoke.js，只验证真实登录、Page AI 抽屉、opencode iframe/host chrome 和 changed file/open/refresh DOM hook，不 mock 聊天成功；raw local resource target 改动补跑 task520-page-ai-raw-resource-target-smoke.js；task504-page-ai-history-agent-filter-smoke.js 覆盖 Page AI 历史按 agent 过滤；ChatOnly / provider session 绑定改动优先跑 task512-chatonly-doubao-sync-smoke.js，跨 provider 同步补跑 task513-chatonly-provider-sync-smoke.js
• Dev hot / OnlyOffice live bridge：Sidebar dev hot reload 入口改动补跑 task514-sidebar-dev-hot-reload-gating-smoke.js；OnlyOffice live bridge session / scope / HTTP 工具边界改动补跑 task515-onlyoffice-live-scope-http-smoke.js；bridge session/token/queue/current/close 和 docKey/pageOrigin 元数据改动补跑 task516-onlyoffice-bridge-multisession-browser-smoke.js；bridge plugin index / Asc.plugin direct loop / plugin 元数据透传改动补跑 task517-onlyoffice-bridge-plugin-direct-smoke.js；真实 ONLYOFFICE iframe / DocumentServer session、同文档双 tab、resource scope 和非 dry-run 写入落点改动补跑 task518-onlyoffice-real-iframe-session-scope-smoke.js；Page AI 真实 UI 选择 Office target 并冻结 live bridge session 改动补跑 task523-page-ai-onlyoffice-real-target-session-smoke.js
• local resource lifecycle API：task437-local-folder-asset-trash-lifecycle-smoke.js，现在只验证 local-file:* delete / restore / purge，不再依赖普通 .txt 是否出现在 UI 文件树。

0.2 需要退役或拆分的历史脚本

• task444-convex-workspace-export-local-fixture-smoke.js、task455-convex-export-plan-rollback-smoke.js 与 export-convex-workspace-to-local.js：Convex export 迁移验证已退出默认 smoke，已归档到 recycle/scripts/retired-convex-export-smokes-20260526/。
• 注意编号复用：scripts/task444-filetree-create-mindmap-title-cache-smoke.js 与 scripts/task455-local-folder-mindmap-clean-smoke.js 仍是当前本地 filetree / mindmap 脚本；退役的是带 convex-export 名称的 task444 / task455。
• 旧 Convex 兼容 smoke 已软删除到 recycle/20260527-legacy-cleanup/convex/scripts/，包括 task163、task174、task175、task427、task428、task429、task430、task431、task432、task433、task434。
• task179-tree-create-delete-no-reload-smoke.js：覆盖 /tree debug shell。/tree 已是显式 debug/internal 边界，脚本默认阻断；只有设置 MNOTE_ALLOW_DEBUG_TREE_SMOKE=1 时才可执行。
• task123-rust-web-tree-live-stream-consumer-smoke.js：只证明 /api/tree/events SSE fallback 仍可用。当前 realtime 主链是 WebSocket push + SSE fallback；验证主链时优先使用 446 / 447 / 448，只有排查 fallback 时再跑 123。
• 旧 task019、task021、task022 这类早期 UI regression 脚本已软删除到 recycle/scripts/retired-ui-regressions/，只作为历史对照；后续默认不要用于当前 Rust SSR / local-first 主路径验收。

0.3 其他 current 候选脚本

这些脚本不是最小默认基线，但仍属于当前 Rust SSR / leptos-tiptap / local-first 维护面，按改动范围选择性运行：

• task426-mnote-web-main-no-reload-smoke.js
• task109-leptos-island-multipage-save-smoke.js
• task122-rust-web-create-page-ui-smoke.js
• task125-rust-web-search-server-first-smoke.js
• task165-rust-web-dual-pane-smoke.js
• task458-local-create-page-no-conflict-smoke.js
• task459-local-markdown-attachment-tab-smoke.js
• task484-local-folder-page-body-refresh-readback-smoke.js
• task486-local-markdown-save-error-editor-preserves-content-smoke.js
• task487-local-folder-tree-live-consumer-smoke.js

1. 当前测试分层

按目录里的现状，脚本大致分成四层。

1.1 入口与网关层

这一层主要验证路由、网关、owner、认证入口、基础响应是否正确，特点是快、稳定、适合作为最早执行的守门测试。

代表脚本：

• task097-homepage-entry-smoke.js
• task114-rust-web-gateway-entry-smoke.js
• task159-auth-entry-smoke.js

适用场景：

• 刚切流 Rust Web
• 改了入口路由、鉴权、兼容代理
• 需要先判断“服务有没有活着、入口是不是对的”

1.2 页面交互 smoke 层

这一层是当前最核心的 UI 验证方式：启动页面、登录测试账号、进入真实文档页或工作区，然后通过 Playwright 操作页面并做断言。

代表脚本：

• task110-page-title-single-truth-smoke.js
• task112-tree-rust-family-regression-smoke.js
• task120-rust-web-tree-integration-smoke.js
• task122-rust-web-create-page-ui-smoke.js
• task164-page-options-visible-effect-smoke.js
• task490-runtime-surfaces-smoke.js
• task165-rust-web-dual-pane-smoke.js
• task164-desktop-hot-local-folder-main-entry-smoke.js
• task166-local-first-managed-workspace-no-convex-smoke.js
• task455-local-folder-mindmap-clean-smoke.js

这一层已经覆盖了当前主线里最重要的部分：

• tree / sidebar / create page
• document shell / island hydration
• 页面设置、双栏、AI、local folder
• Rust Web 主路径

1.3 Wolai 对标与视觉取证层

这一层不是单纯判断“是否通过”，而是要保留截图、矩阵、对比结论，方便和 Wolai 体验做真实核对。

代表脚本：

• task119-rust-web-wolai-visual-regression-smoke.js
• task129-wolai-aline-baseline-smoke.js
• task130 到 task137 一系列 wolai-aline-*
• task160-wolai-page-settings-shell-smoke.js
• 页面 AI 旧 /api/ai-agent/run 视觉 smoke 已移入本机 gitignored recycle/scripts/retired-ai-agent-run-smokes/；当前页面 AI 验证优先使用 OpenHub / opencode / Page AI smoke 与 task-page-block-ai-tools-smoke.js。Hermes 相关 smoke 只作为 legacy guard / 历史对照。

这一层最重要的原则不是“文案命中”，而是：

• 必须有截图
• 必须能说明视口
• 必须能说明对比对象
• 最终仍需要人工看图

1.4 共享 helper 与登录/临时文档支撑层

这部分决定了 smoke 是否能稳定复用。

关键文件：

• tree-shell-smoke-helpers.js
• task114-rust-web-gateway-entry-smoke.js

目前 helper 已经沉淀了几个稳定约定：

• 默认前端入口：MNOTE_UI_BASE_URL，缺省 http://127.0.0.1:3000
• 默认测试账号：
  • 邮箱：mnote.e2e@example.com
  • 密码：MnoteE2E123!
  • 快捷按钮：测试账号快速登录
• 通过 API 或 UI 兜底完成认证
• 为 smoke 自动创建、重命名、清理临时页面

后续新脚本优先复用这些 helper，不要在每个任务里再复制一套登录和清理逻辑。

Dev seed 启动契约

• 需要 setupWorkspaceAccess、seedAiPolicy、seedAiRuntime 等测试数据准备能力时，先确认服务由 npm run dev:hot 启动。
• npm run dev:hot 默认开启 dev fixtures；可用 MNOTE_WEB_ALLOW_DEV_FIXTURES=0 npm run dev:hot 显式关闭。
• npm run desktop:hot 保持生产近似的安全默认，不自动开放 /api/dev/seed；确需复用时显式执行 MNOTE_WEB_ALLOW_DEV_FIXTURES=1 npm run desktop:hot。
• smoke 遇到 dev_seed_disabled 时不得标记为“功能未验证后跳过”；应先按上述契约重启服务，再重新执行完整 smoke。

2. 当前推荐测试顺序

对本项目，推荐不要一上来就跑最重的 UI 对标脚本，而是按下面顺序推进。

2.1 第一步：入口守门

先跑入口和网关类 smoke，确认不是服务没起或路由错了。

建议优先：

node scripts/task114-rust-web-gateway-entry-smoke.js
node scripts/task159-auth-entry-smoke.js
node scripts/task097-homepage-entry-smoke.js

适用时机：

• 本地服务刚启动
• 刚切换分支
• 改了认证、入口、gateway、compat

2.2 第二步：主路径交互 smoke

入口没问题后，再跑和当前改动最相关的页面交互脚本。

例如：

• tree / sidebar 改动：task112、task120、task122
• document shell / island：task110、task121
• local-first：优先使用 task164-desktop-hot-local-folder-main-entry-smoke.js、task166-local-first-managed-workspace-no-convex-smoke.js、task167-local-markdown-title-body-options-no-convex-smoke.js、task455-local-folder-mindmap-clean-smoke.js
• 页面设置：task160、task164-page-options-visible-effect-smoke.js
• 双栏：task165
• AI：优先使用 OpenHub / opencode / Page AI 当前主线 smoke、task-page-block-ai-tools-smoke.js 和 task-hermes-page-ai-retirement-guard.js 这类 legacy guard；Hermes 页面 AI smoke 只作为历史对照。Page AI history / skills / ChatOnly 相关改动补跑 task503-mindmap-skill-capability-smoke.js、task504-page-ai-history-agent-filter-smoke.js、task512-chatonly-doubao-sync-smoke.js、task513-chatonly-provider-sync-smoke.js；OnlyOffice live bridge 改动补跑 task515-onlyoffice-live-scope-http-smoke.js、task516-onlyoffice-bridge-multisession-browser-smoke.js、task517-onlyoffice-bridge-plugin-direct-smoke.js、task518-onlyoffice-real-iframe-session-scope-smoke.js，其中 task516/517 覆盖 bridge session lifecycle 与 docKey/pageOrigin 元数据；Page AI 真实 target picker / Office live session 改动补跑 task523-page-ai-onlyoffice-real-target-session-smoke.js；task155、task156、task161 等旧 /api/ai-agent/run smoke 只保留在本机 gitignored recycle/scripts/retired-ai-agent-run-smokes/ 做历史对照

原则：

• 只跑和当前改动相关的脚本
• 不要无差别全量跑
• 先窄后宽

2.3 第三步：截图证据复核

如果脚本本身已经输出：

• screenshot
• screenshotDir
• measure
• matrixPath
• resultPath

那这些产物不应只当“附带文件”，而应作为测试结果的一部分。

推荐做法：

• 成功时也保留关键截图
• 失败时至少保留失败前最后一张截图
• 重要 UI 任务保留整组截图目录

2.4 第四步：/doko 真实页面复核

当 smoke 已经告诉你“逻辑大体通过”，但你仍想确认页面是否真的像人看到的一样时，再补 /doko。

/doko 更适合回答这类问题：

• 首屏布局是不是顺眼
• Sidebar 层级、图标、文案是否真可读
• 页面设置弹层是否真的展开到位
• 登录后工作区是否像预期渲染

/doko 不擅长替代：

• 稳定断言
• 自动点击链路
• 大量重复回归

所以推荐组合是：

smoke 先筛出通过/失败 -> 看截图 -> 必要时再用 /doko 复核真实页面

3. 为什么当前不建议把主线转成“浏览器插件测试”

当前讨论过 codex cli + 浏览器插件 的方向，但对 mnote 现阶段的主要收益并不明显。

原因有三点：

1. 你当前真正缺的是“页面直观证据”，不是“替换掉 Playwright”
2. scripts/ 里的 smoke 已经能覆盖多数关键交互，只是证据层不够统一
3. 浏览器插件路线更适合复用真实 Chrome 当前标签页和真实登录环境，不是当前项目测试的首要瓶颈

因此，现阶段更推荐：

• 保留 Playwright smoke 作为自动化骨架
• 补足截图、trace、结果摘要
• 用 /doko 做人工视角复核

4. 新增或修改 smoke 的写法建议

这里不是要求统一重构旧脚本，而是约束新增脚本尽量沿着同一条路走。

4.1 优先复用 helper

优先从下面两个文件拿能力：

• tree-shell-smoke-helpers.js
• task114-rust-web-gateway-entry-smoke.js

尤其是：

• 登录
• 创建临时文档
• 清理临时文档
• fetchWithTimeout
• findFreePort
• waitForGateway

4.2 让脚本输出结构化结果

推荐脚本结束时输出 JSON，至少包含：

{
  "ok": true,
  "baseUrl": "http://127.0.0.1:3000",
  "task": "taskxxx-name",
  "screenshot": "/abs/path/to/file.png",
  "screenshotDir": "/abs/path/to/dir"
}

如果没有截图，也应该至少输出：

• ok
• baseUrl
• task
• 关键对象 id（如 documentId、workspaceId）

4.3 对 UI 任务默认保留截图

满足下面任一条件时，建议默认保留截图：

• 首屏入口变化
• Sidebar / tree 结构变化
• modal / popover / dropdown 变化
• editor block 行为变化
• Wolai 对标

推荐命名方式延续现有风格：

• 01-before-*
• 02-after-*
• 03-after-reload-*

这样后续人工复核时不需要重新猜步骤。

4.4 失败信息要面向定位

断言报错要直接描述“哪个状态不对”，不要只写泛化失败。

推荐：

• 开启宽版后 htmlWide 应为 true，实际 false
• 测试账号登录后仍停留在 /auth
• 本地首屏未捕获工作区特征

不推荐：

• smoke failed
• assert error

5. 针对当前 mnote 的推荐组合

如果后续只是做日常开发验证，推荐这样选：

5.1 快速检查

适合日常改完立刻看：

node scripts/task114-rust-web-gateway-entry-smoke.js
node scripts/task159-auth-entry-smoke.js

5.2 主路径回归

按当前改动挑 1 到 3 个最相关脚本，例如：

node scripts/task120-rust-web-tree-integration-smoke.js
node scripts/task122-rust-web-create-page-ui-smoke.js
node scripts/task164-page-options-visible-effect-smoke.js

5.3 视觉复核

如果任务明显涉及视觉或交互形态：

• 先看 smoke 产出的截图
• 再用 /doko 打开真实页面复核

5.4 Wolai 对标任务

对标任务不要只看断言结果，至少补：

• 本地 smoke
• Wolai 基线截图
• 本地截图
• 必要时 comparison matrix

6. 对后续演进的建议

这部分不是要求本轮立刻实现，而是后续维护时优先考虑。

6.1 在现有 smoke 上统一证据产物

优先级最高的增强不是“换工具”，而是统一输出：

• tmp/.../screenshots
• tmp/.../trace.zip
• tmp/.../result.json

这样 smoke 从“脚本 pass/fail”升级成“脚本 + 可看证据”。

6.2 把 /doko 固化成复核步骤

适合写进任务流程的话术是：

• 先跑 smoke
• 再看截图
• 仍有疑问时用 /doko 看真实渲染

不要让 /doko 承担自动化断言职责。

6.3 新脚本优先沿当前命名方式继续

目前 taskNNN-...-smoke.js 已经形成了可追踪的任务链，后续建议继续沿用，避免引入第二套命名体系。

---

如果后续要继续推进，最值得做的不是重写测试体系，而是：

1. 给最常用的 smoke 补统一截图/trace 产物
2. 再补一份“如何读取 smoke 结果”的轻量脚本或汇总器

这样能直接解决当前最真实的痛点：A + C，也就是“结果更直观、测试更像真的看过页面”。

7. 脚本纪律：不得直写 control-plane 数据库

所有测试和 smoke 脚本不得直接通过 sqlite3 CLI、node:sqlite、better-sqlite3 或任何本地 SQLite 库写 control-plane DB。需要写入测试数据时，必须走以下批准路径：

7.1 通过 API seed（推荐）

使用 scripts/lib/control-plane-dev-seed.js 提供的 helper，通过 POST /api/dev/seed 写入：

const { setupWorkspaceAccess, seedAiRuntime } = require("./lib/control-plane-dev-seed");
await setupWorkspaceAccess(requestContext, baseUrl, { ... });

该 helper 调用的是 Rust /api/dev/seed 端点，不直写数据库。 初始环境（测试账号 + workspace）也可通过 control-plane-admin init --backend ... 准备，见 docs/operations/control-plane-turso.md。

7.2 通过统一环境变量构建

使用 scripts/lib/control-plane-test-env.js 的 buildControlPlaneTestEnv() 获取正确的控制面环境变量：

const { buildControlPlaneTestEnv } = require("./lib/control-plane-test-env");
const controlPlaneEnv = buildControlPlaneTestEnv(dataRoot, process.env);
// 然后传给 spawn(cargo, args, { env: { ...controlPlaneEnv } })

7.3 例外

• scripts/lib/control-plane-dev-seed.js 和 scripts/lib/control-plane-test-env.js 本身是批准 helper。
• scripts/desktop-hot.js、scripts/dev-hot.js、scripts/prod-build-start.js 作为启动基础设施，设置环境变量路径是必要的。
• rust/crates/ 下的 Rust 代码通过 ControlPlaneStore trait 访问数据库是正常路径。
• scripts/task-control-plane-admin-libsql-roundtrip-smoke.js 使用 cargo run --bin control-plane-admin，走 Rust admin CLI。
• sqlite fallback、admin CLI、legacy evidence/local_search 不在脚本纪律约束范围内。
• OpenHub 自身 SQLite 不绑定本轮 control-plane Turso 切换；OpenHub 数据库迁移独立安排，不在当前首轮范围内。

7.4 违规后果

• 直接 sqlite3 写 control-plane DB 会导致多个进程同时写同一个 SQLite 文件，增加 WAL 损坏和并发写入冲突的风险。
• 直接写库的脚本在切换到 Turso/libSQL 后端后将无法运行。
• 违反此纪律的脚本将被要求改用上述批准路径。

具体约束条目见 AGENTS.md 中"脚本纪律"一节。