diff --git a/README.md b/README.md index 9882f9f..5b55e76 100644 --- a/README.md +++ b/README.md @@ -114,9 +114,9 @@ WSL 已验证：EMQX `5.8.9`、MQTTX CLI `1.13.0`、EMQX 服务 `active (running 项目已开发部分模块；从 V4.8 切换到 V5.0 后仅新增少量内容。具体完成度不得从 README 猜测，必须以现有代码、测试、数据库迁移、Git 历史以及 `docs/current-baseline.md`、`docs/module-status.md`、`docs/feature-status.md` 为准。 -- 当前执行游标：`M01-C`。 -- 最近工程提交：`1192dcb`；M01-B 脱敏旧库副本迁移与兼容读取验证。 -- 下一工程目标：MySQL outbox、任务表和 PM2 worker 轻量异步任务基础。 +- 当前执行游标：`M02-A`。 +- 最近工程提交：`2b90d1f`；M01-C MySQL outbox、幂等任务和 PM2 worker。 +- 下一工程目标：多小程序、多租户边界和微信登录身份基础。 ## 版本递进 diff --git a/docs/current-baseline.md b/docs/current-baseline.md index 46bc35a..f22c971 100644 --- a/docs/current-baseline.md +++ b/docs/current-baseline.md @@ -1,8 +1,8 @@ # 当前开发成果基线 > V5.0 首次核验日期：2026-06-16 -> audited_commit: `1192dcb` -> next_engineering_target: M01-C 建立 MySQL outbox、任务表和 PM2 worker 的轻量异步任务基础 +> audited_commit: `2b90d1f` +> next_engineering_target: M02-A 建立多小程序、多租户边界和微信登录身份基础 > 事实源：当前工作区、Git 历史、状态文档、Windows/WSL 检查脚本。 ## 总体结论 @@ -11,9 +11,9 @@ |---|---|---|---| | 总纲版本 | V5.3 已成为当前权威总纲，V5.2/V5.1/V5.0/V4.8 已保留为历史备份 | 根目录存在 `V5.3.md`、`V5.2.md`、`V5.1.md`、`V5.0.md` 和 `V4.8.md` | 可继续按 V5.3 的执行游标开发 | | Git 远端 | `origin=ssh://git@git.txyundm.cn:2222/panda/qipai.git`，分支 `main` | `git rev-list main...origin/main` 为 `0 0` | 本地与远端同步 | -| 正式后端 | 已新增 Fastify 5 + TypeScript 最小骨架、健康/就绪/版本路由、配置模板、依赖锁文件、契约测试、TypeScript 编译、真实 HTTP 健康检查、MySQL 连接池、迁移 CLI、旧表只读兼容 Repository、旧订单金额严格转换，以及真实 MySQL 空库和脱敏旧库副本往返测试 | `backend/package.json`、`backend/package-lock.json`、`backend/src/**`、`backend/tests/**`、`database/fixtures/**`、`scripts/dev/windows/check-backend.ps1`、`scripts/dev/wsl/mysql-migration-roundtrip.sh` | M01-B DONE；MySQL 8.4.9 已验证脱敏旧表在迁移前、up/verify 后、down 后和再次 up/verify 后均可兼容读取；下一阶段为 M01-C | +| 正式后端 | 已完成 Fastify 基础、数据库兼容层、MySQL outbox、幂等任务仓储、租约领取、失败重试、人工补偿状态和独立 PM2 worker | `backend/src/tasks/**`、`database/migrations/2026061802_m01c_async_tasks.*.sql`、`deploy/pm2/ecosystem.config.cjs`、`backend/tests/**` | M01 DONE；WSL MySQL 8.4.9 已验证完整迁移往返、重复入队不重复、worker 重启后任务仍可领取并完成；下一阶段为 M02-A | | 后台管理端 | 仅有 `admin/.gitkeep` | 当前文件扫描 | M09 未开始，不能标记 DONE | -| 微信小程序 | 仅有 `miniapp/.gitkeep` | 当前文件扫描 | M08 未开始，不能标记 DONE | +| 微信小程序 | Git 中仅有 `miniapp/.gitkeep`；工作区另有未跟踪模板，按 ISSUE-007 隔离 | Git 状态与当前文件扫描 | M08 未开始，模板未审查、未纳管，不能标记 DONE | | 数据库迁移 | 已新增 M01-B 核心 schema up/down/verify SQL、最小脱敏 seed、旧库结构 fixture、迁移计划/执行 CLI、验证结果数量门禁和 MySQL 8 集成测试 | `database/migrations/2026061601_m01b_core_schema.*.sql`、`database/seeds/2026061601_m01b_minimal_seed.sql`、`database/fixtures/2026061801_m01b_legacy_schema.sql`、`backend/src/db/migration-runner.ts`、`backend/tests/mysql-migration-roundtrip.test.mjs` | M01-B DONE；WSL MySQL 8.4.9 已验证 8 条旧库 fixture、11 条 up、3 条 verify、10 条 down，并验证租户隔离和旧金额整数分转换；不导入真实旧数据 | | M00 部署脚本 | 已有菜单、状态、HTTPS、Certbot、EMQX、备份检查模板 | `setup.sh`、`scripts/setup/`、`deploy/` | PARTIAL，生产未执行 | | 发布清单 dry-run | 可基于当前 HEAD 输出 `deployed=false` 的 release manifest，记录后端/后台/迁移尚未生成而跳过 | `scripts/setup/deploy-business.sh --dry-run .`、`scripts/dev/windows/check-release-manifest.ps1` | 可在 M00 验证结构；真实构建与生产发布待 M01/M09 后接入 | @@ -35,6 +35,6 @@ ## 下一步 -1. 进入 M01-C：建立 MySQL outbox、任务表、幂等领取和失败重试基础，并接入独立 PM2 worker 入口。 -2. 评估 Kysely 安全修复版的 Node 22 要求；未升级生产运行时前继续使用 `mysql2/promise`。 -3. 保持 Windows 常规门禁不依赖本机 MySQL；真实迁移测试固定在 WSL 原生临时副本执行。 +1. 进入 M02-A：建立多小程序、多租户边界和微信登录身份基础。 +2. 在后续业务事务中使用现有 outbox/任务基础注册真实 handler，不在 M01-C 预造空业务处理器。 +3. 评估 Kysely 安全修复版的 Node 22 要求；未升级生产运行时前继续使用 `mysql2/promise`。 diff --git a/docs/devlogs/2026-06-18-M01-C-轻量异步任务基础.md b/docs/devlogs/2026-06-18-M01-C-轻量异步任务基础.md new file mode 100644 index 0000000..0fea043 --- /dev/null +++ b/docs/devlogs/2026-06-18-M01-C-轻量异步任务基础.md @@ -0,0 +1,38 @@ +# 开发日志：2026-06-18 M01-C 轻量异步任务基础 + +## 完成内容 + +- 新增 `qipai_outbox_events` 与 `qipai_async_tasks` 独立迁移、回滚和验证 SQL。 +- outbox 与任务均使用租户级幂等键；重复写入返回既有记录，不产生重复副作用入口。 +- 任务支持优先级、可执行时间、`FOR UPDATE SKIP LOCKED` 并发领取、worker 租约、过期租约恢复、指数退避和最大重试次数。 +- 达到最大重试次数后进入 `COMPENSATION_REQUIRED`，保留最后错误供人工补偿。 +- 新增通知、订单推进、设备命令、退款查询、统计汇总和 outbox 发布六类任务类型。 +- 新增独立 worker 入口和 `qipai-worker` PM2 进程；具体业务 handler 由后续模块注册，不创建空业务实现。 + +## 数据库/API/部署影响 + +- 数据库：新增迁移版本 `2026061802_m01c_async_tasks`；down 先删除任务/outbox 表，再由历史迁移回滚核心表。 +- API：无公开接口变化。 +- 部署：PM2 增加 `qipai-worker`，与 API 共用后端构建产物和 MySQL 配置。 + +## 验证结果 + +- `npm test`（`backend/`）：退出码 0。 +- `powershell -ExecutionPolicy Bypass -File scripts/dev/windows/check-backend.ps1`：退出码 0；编译、契约测试、迁移计划和 HTTP 健康检查通过。 +- `powershell -ExecutionPolicy Bypass -File scripts/dev/windows/check-secrets.ps1`：退出码 0。 +- WSL 原生临时副本 + MySQL `8.4.9`：`up → verify → down → up → verify` 退出码 0；up 14 条、verify 6 条、down 13 条。 +- 真实 MySQL 验证重复任务只保留一条；销毁第一个 Repository 后由新 Repository 领取并完成，证明 worker 重启不丢任务。 +- 迁移摘要：up `5b381518ca8875e6bc5398e35d8627e56effa11618983412d5f41ca92c96ca9b`；verify `9b36eb26c7e4b2b884dca609fba172a2a0fbbfc828ec1376a8504afa798c6564`；down `20f8f37a0662c3f5a20ba207a4314c5c7df47bcfc64a60604696b2d9ee44dc2d`。 + +## 边界与下一步 + +- 未连接生产数据库，未启动生产 PM2。 +- 通知、订单、设备、退款和统计真实 handler 属于后续业务模块；M01-C 只提供可运行基础设施。 +- 工作区已有未跟踪 `miniapp/` 模板继续按 `ISSUE-007` 隔离，本提交不修改、不暂存。 +- 下一阶段：M02-A 多小程序、多租户边界与微信登录身份基础。 + +## Git + +- commit：`2b90d1f feat(M01-C): 建立MySQL异步任务基础` +- 远端：`origin/main` +- push/远端校验：成功，工程提交推送后 `HEAD == origin/main`。 diff --git a/docs/feature-status.md b/docs/feature-status.md index 77cd5b8..a55288e 100644 --- a/docs/feature-status.md +++ b/docs/feature-status.md @@ -8,7 +8,8 @@ | REF-001 | 参考资料完整纳管 | M00-A | PARTIAL | `7bb4338` | 已生成哈希清单、脱敏日志、页面地图、接口线索和旧数据库结构清单；含秘密/依赖/真实数据风险的原始包和 SQL 已移出 Git 跟踪；仓库完整性门禁已覆盖意外 untracked、嵌套 Git 和 forbidden tracked 文件。 | 后续仍需按模块生成正式源码/迁移，旧 xjar 需大文件策略。 | 进入 M00-B/M00-C 前继续保持原包忽略和摘要可追溯。 | | SCM-001 | 模块完成即完整推送 | M00-B/M00-C | PARTIAL | `ef0edda` | 首次 main push 成功，`HEAD == origin/main` 校验通过；推送脚本已生成；仓库完整性脚本已升级为提交前门禁并接入 `test-all.ps1`；`push-module.ps1` 已改为先暂存显式路径再运行门禁；状态文档枚举和临时占位检查已接入。 | 后续模块仍需逐次执行并记录。 | 继续在每轮提交前执行完整性、敏感信息、大文件、状态文档和远端一致性检查。 | | WSL-001 | WSL 隔离辅助验证 | M00-C | PARTIAL | `a690e85` | WSL 基础脚本已执行通过；本地 MQTT 服务级核验通过；认证/ACL 冒烟脚本入口、配置自检、可选 TLS/遗嘱/重复消息探测入口已生成；V5.0 点名的 WSL EMQX 检查/启动/停止入口已补齐。 | 正式后端/后台尚未生成，无法执行完整 Linux 构建；MQTT 本地账号未配置，认证/ACL/TLS/遗嘱/幂等未验收；生产 EMQX 不由 WSL 脚本管理。 | M01/M09 生成项目后在 WSL 原生临时副本执行完整构建；配置本地 MQTT 最小权限账号后执行冒烟和可选探测。 | -| API-001 | 固定 HTTPS API 域名 | M00-E/M01/M08/M10 | PARTIAL | `1192dcb` | 已新增 Windows 检查脚本、Ubuntu 菜单检查和固定域名 Nginx 模板；M01-A 健康接口、编译和本地 HTTP 检查通过；M01-B 的连接池、迁移 CLI、旧表兼容读取、整数分转换已通过契约测试，并在 WSL MySQL 8.4.9 的空库和脱敏旧库副本完成 `up/verify/down/up/verify`，异常退出清理后临时库与账号均为 0。 | DNS/HTTPS 生产验证、Ubuntu 24.04 生产运行时、业务接口和鉴权未验收。 | 进入 M01-C 轻量异步任务基础；后续在 M10 接入生产域名、证书和 Nginx 真实验收。 | +| API-001 | 固定 HTTPS API 域名 | M00-E/M01/M08/M10 | PARTIAL | `1192dcb` | 已新增 Windows 检查脚本、Ubuntu 菜单检查和固定域名 Nginx 模板；M01-A 健康接口、编译和本地 HTTP 检查通过；M01-B 的连接池、迁移 CLI、旧表兼容读取、整数分转换已通过契约测试，并在 WSL MySQL 8.4.9 的空库和脱敏旧库副本完成 `up/verify/down/up/verify`，异常退出清理后临时库与账号均为 0。 | DNS/HTTPS 生产验证、Ubuntu 24.04 生产运行时、业务接口和鉴权未验收。 | 进入 M02 身份与权限；后续在 M10 接入生产域名、证书和 Nginx 真实验收。 | +| ASYNC-001 | MySQL outbox 与轻量任务 worker | M01-C | DONE | `2b90d1f` | outbox/任务迁移、幂等键、`FOR UPDATE SKIP LOCKED` 领取、租约恢复、指数退避、人工补偿状态和 PM2 worker 已实现；Windows 契约测试与 WSL MySQL 8.4.9 往返迁移、重复入队、重启后领取验证通过。 | 具体通知、订单、设备、退款和统计 handler 在对应业务模块接入。 | M02 起按业务事务写入 outbox/任务并注册真实 handler。 | | TLS-001 | Nginx 与证书自动化 | M00-E/M10 | PARTIAL | `4cb3ab6` | 已生成 Nginx 模板、Certbot 命令说明和菜单第 4 项检查，可检查模板、站点启用、TLS、健康端点、证书文件、续期配置和 `certbot.timer`。 | 证书申请/续期 dry-run、80/443 生产验证未执行。 | 在生产 Ubuntu 执行证书签发、续期 dry-run 和 Nginx 安装记录。 | | WXNET-001 | 微信合法域名与真机验证 | M00-E/M08/M10 | TODO | - | 已补 API 域名报告入口，但未做微信后台或真机验证。 | 微信后台/真机未验证。 | 后续导入小程序后执行合法域名和真机验证。 | | OPS-001 | 固定 `/opt/apps` 目录 | M00-D/M10 | PARTIAL | `292ab7f` | `scripts/setup/init-layout.sh` 已生成目录布局、uploads 目录和 manifest；WSL 检查脚本通过，未在生产 Ubuntu 执行。 | 生产操作未执行。 | 由管理员在 Ubuntu 菜单执行并记录结果。 | diff --git a/docs/module-status.md b/docs/module-status.md index 5703c08..dee005d 100644 --- a/docs/module-status.md +++ b/docs/module-status.md @@ -2,11 +2,11 @@ ```yaml execution_cursor: - current_module: M01 - current_stage: M01-C - last_completed_stage: M01-B - next_stage: M01-C - last_engineering_commit: 1192dcb + current_module: M02 + current_stage: M02-A + last_completed_stage: M01-C + next_stage: M02-A + last_engineering_commit: 2b90d1f last_push_verified: true blocked_reason: "" ``` @@ -14,7 +14,7 @@ execution_cursor: | 模块 | 状态 | 最近提交 | 最近开发日志 | 备注 | |---|---|---|---|---| | M00 单仓库与服务器基础骨架 | PARTIAL | `ef0edda` | docs/devlogs/2026-06-16-M00-V5-基线核验.md | V5.2 已接入；已有成果基线、仓库完整性门禁、状态文档门禁、显式路径模块推送脚本、release manifest dry-run 检查、WSL 本地 MQTT 服务级核验、认证/ACL 冒烟入口、配置自检、可选 TLS/遗嘱/重复消息探测入口和 WSL EMQX 检查/启动/停止入口已补；生产部署、账号配置、真实验收仍未完成。 | -| M01 后端 API 基础工程 | PARTIAL | `1192dcb` | docs/devlogs/2026-06-16-M01-B-数据库迁移与兼容层.md | M01-A 已完成后端骨架；M01-B 已完成核心 schema、迁移 CLI、旧表只读兼容、金额严格转换，以及 WSL MySQL 8.4.9 空库和脱敏旧库副本往返验证。当前进入 M01-C 轻量异步任务基础。 | +| M01 后端 API 基础工程 | DONE | `2b90d1f` | docs/devlogs/2026-06-18-M01-C-轻量异步任务基础.md | 已完成 Fastify 后端骨架、数据库迁移兼容层，以及 MySQL outbox、幂等任务、租约领取、失败重试、人工补偿状态和独立 PM2 worker；WSL MySQL 8.4.9 往返迁移与 worker 重启持久性验证通过。 | | M02 登录、租户、权限 | TODO | - | - | - | | M03 门店、房间、价格、营业时间 | TODO | - | - | - | | M04 订单、时段锁定、支付闭环 | TODO | - | - | - |