完善部署中断恢复提示和安全阶段诊断并记录实机边界

This commit is contained in:
xuans committed 2026-09-30 22:41:28 +08:00
1 parent b27eedc1d0
commit 6efc89061b
17 files changed
+386 -14

No files matched your search

+13
View File
@@ -1,4 +1,17 @@
# Linux 生产流程测试记录
## 真实部署中断与人工恢复(2026-09-30 22:35)
- 候选仍为 91e1123。沿用已有证书和数据执行破坏性中断验证,没有清库,不能替代最终首次生产流程;未新增辅助验收脚本。
- 通过正式服务器配置接口临时设定校验命令为有界延迟后执行 nginx 配置校验,重载命令保持正常。22:25:00 从正式页面触发第二域名部署,任务 8aa3db95-ab7a-4559-a558-a1a9c8fa5f00、尝试 656a9679-33ab-458e-bcbe-2ed6694735eb 均为 running,远端可见 sleep 45 进程及三个部署锁和对应事务旧文件。
- 首次 systemctl 命令使用当前系统不支持的参数,未终止进程;确认任务与延迟进程仍活动后改用该系统支持的 --kill-who=main。22:25:30 SIGKILL 主 PID 81906,22:25:31 systemd 自动启动 PID 83070,NRestarts=1。不是空闲服务重启,也没有将首条失败命令记为成功。
- 任务恢复为 failed/service_restart,尝试为 failed,task_recovery 审计为 failed;三者旧提示均为“服务重启导致任务中断,请重新执行”。无自动重新签发或重放远端命令。
- 22:26:42 重新登录后通过产品接口恢复 nginx -t 与 nginx -s reload。延迟进程已结束;远端保留三个锁和三个事务旧文件,nginx worker 未变,新旧 cert/fullchain/key 逐一内容一致。
- 22:27:09 产品直接重试,任务 0d6dfdf0-65a0-4af5-8544-0f9c3b604018 失败,接口 502,没有误报成功;原有脱敏只显示“证书部署失败”,不能告知用户遗留锁原因。
- 确认活动任务为零、延迟进程结束、目录真实路径正确、三个锁为空且非符号链接、新旧文件一致后,将六个现场项目移到 /ssl/scert-interruption-evidence/8aa3db95-ab7a-4559-a558-a1a9c8fa5f00。受限目录权限 700,私钥旧文件 600;未删除文件、未自动抢占未知锁,也未覆盖另一域名文件。
- 22:28:14 正式产品接口部署已有证书,任务 800815bd-7fcd-4262-87c0-63fd6174dd29 成功,返回 verification_status=success。22:33 再查主服务、目录 socket、nginx 均 active,活动任务为零,目标目录无残留锁;两域名正常 TLS HTTPS 200,公网指纹各自保持与托管证书一致。
- 结论:启动任务恢复、遗留锁拒绝和人工核查后重新部署取得证据;远端自动回滚及自动解除崩溃事务未实现。已开发固定阶段安全诊断及中断核查提示,尚未部署,不能将本次人工恢复记为自动恢复通过。
- 22:41 开发回归完成:后端全量测试及静态检查退出零,部署、仓储、应用、接口四包竞态通过,前端 240 项通过;开始干净源码正式构建,构建通过不替代实机复测。
## 单台服务器双域名闭环(2026-09-30 22:18)
- 新域名 scert-multi-20260930.apmmk.cn,资源 ID fd0b6b70-9cca-48d7-9d9f-40551cb95fc5,与第一域名关联同一服务器 3cfe6b82-6807-421d-88ab-a2034370375b。
+15
View File
@@ -1,4 +1,19 @@
# Scert 整改任务执行清单
## 当前任务看板(2026-09-30 22:35,中断恢复实测与诊断整改)
需求确认:沿用完整 P0-10 与生产验收范围。修改前检查点 b27eedc 已推送;本轮验证部署中断、遗留锁、人工核查后的恢复,并修正公开诊断,不把诊断改善当作远端事务自动恢复。
- [x] 真实部署执行中 SIGKILL 主进程,systemd 自动重启;任务、尝试恢复为 failed,阶段 service_restart,审计写入,没有悬挂或误报成功。
- [x] 实测直接重试被遗留锁拒绝;核实无活动任务、远程延迟进程结束及新旧文件一致后,将三个锁和三个事务旧文件移入受限证据目录,未删除现场;产品重新部署成功,两站点正常。
- [x] 新增固定阶段错误码和中文安全诊断,覆盖连接、目录、锁、上传、替换、校验、回滚、运行态未确认及清理;接口和持久化结果只放行固定诊断,保留底层受保护证据。
- [x] 中断任务提示不再要求直接重试,明确执行结果未确认及关联资源核查;正式回归修复前失败、修复后通过。部署、仓储、应用和接口四包测试通过。
- [x] 接口读取与前端诊断回归通过;后端全量测试、静态检查、部署/仓储/应用/接口四包竞态均退出零,前端 240 项通过。
- [~] 提交当前修复,使用干净源码正式构建及部署复测。
- [!] 当前线上仍为 91e1123;新诊断尚未部署。远端崩溃事务没有自动恢复,P0-10 整项未完成。
- [ ] 第二台真实服务器、三数据库矩阵、Linux 原生与 Windows 服务、备份恢复和最终清库首次生产流程继续保留。
以下带时间章节为历史证据,当前状态以上节为准。
## 当前任务看板(2026-09-30 22:18)
需求确认:沿用已确认完整整改范围;新包正式安装、DNS 复测、旧证书负向与恢复、单机多域名依次推进,不缩减多服务器、数据库和最终首次流程验收。修改前检查点 7d0ce94 已推送。下方各时间章节保留为历史证据,当前状态以本节为准。
+13
View File
@@ -1,4 +1,15 @@
# Scert 整改、合并与优化清单
## 当前验收总览(2026-09-30 22:35,中断恢复边界已实测)
- [✓] P0-03 局部复审结论保持,不把后续事务门禁重新挂到源码目录任务下。
- [x] 主进程在真实部署的远端配置校验阶段被强制终止,systemd 自动重启;任务、尝试和恢复审计一致为失败,没有永久执行中或误报成功。
- [x] 已实证遗留三个部署锁阻止直接重试;人工核查新旧文件一致并隔离保留事务现场后,正式产品接口重新部署成功,两域名正常 HTTPS。此为人工恢复,不是自动事务恢复。
- [x] 新增固定阶段中文诊断及错误码,任务查询兼容历史错误脱敏;中断提示改为先核查关联资源、远端文件、锁及服务状态。22:41 后端全量、静态检查、四包竞态及前端 240 项均通过。
- [~] P0-10 继续进行:诊断代码尚未正式构建部署;进程崩溃后的远端自动恢复、后置 HTTPS 失败的运行态恢复均未完成。
- [!] P0-04、P0-11、P0-12 等完整范围不变;第二台真实服务器、数据库矩阵、双平台服务与最终清库首次流程没有新增通过证据。不承诺当晚生产放行。
以下较早章节保留历史时间,不代表当前阻塞位置。
## 当前验收总览(2026-09-30 22:18,以本节为准)
下方带时间的进度为历史证据,不代表当前阻塞位置。P0-03 已按源码与产物边界范围复审通过,不再使用历史“仍停在 P0-03”作为当前结论。完整整改及生产验收仍未完成,不承诺当晚放行。
@@ -800,6 +811,8 @@ updated_by
**状态:** `[~] 进行中`
**中断恢复实测(2026-09-30 22:35):** 真实部署校验中强制终止主进程,systemd 自动重启,任务、尝试及审计正确标记中断失败;远端锁和事务旧文件保留,直接重试被拒绝。人工核查并隔离现场后可通过产品重新部署。已开发固定阶段诊断和先核查后重试提示,专项通过但未部署;远端崩溃事务自动恢复仍未完成,不能标记整项通过。
**最新整改(2026-09-30):** 已复现并修复后置 HTTPS 校验接受旧有效证书、校验失败仍返回成功部署报告的问题;身份来自实际待部署文件。报告以 verification_status 单独记录站点生效校验,整体失败不改写单台真实文件推送事实;任务、尝试和接口保持失败,页面不再汇总为完成。本批本地测试不等于实机恢复通过;该校验仍位于文件部署事务之后,不具备据此宣称自动回滚的依据。
所有长耗时操作统一进入任务中心:
+19
View File
@@ -1,5 +1,24 @@
# Scert 生产部署与运维说明
## 部署中断处理与阶段诊断(2026-09-30)
服务重启会将未完成任务和执行尝试标记为失败并记录恢复审计,但这不表示远端文件、部署锁或服务运行态已经恢复。不得仅凭任务失败提示直接重复申请证书或删除远端锁。
处理前应确认没有活动部署和仍在执行的远程命令,核对任务关联服务器、三个目标文件、对应事务旧文件、权限及实际站点证书。只有确认现场归属和恢复方案后才能由管理员处置;保留证据,不抢占无法确认归属的锁。修正配置后优先部署已有证书,避免重复签发。
新候选的部署响应结果增加可选 failure_code,message 为固定中文诊断;任务部署结果查询保留同一安全说明,不要求数据库结构升级。旧记录和未知错误仍返回通用提示。代码、路径和远端输出不从错误文本直接透传;详细原因查受保护日志。新增诊断尚需正式部署复测,本节不代表自动恢复功能已完成。
| 错误码 | 处理含义 |
| --- | --- |
| lock_unavailable | 并发部署、遗留锁或锁创建失败;先核查,不直接删除锁 |
| validation_failed | 配置校验失败,文件已回滚,未执行重载 |
| rollback_failed | 文件回滚未完成,保留锁并人工核查 |
| runtime_unconfirmed | 重载失败后文件回滚,但运行态未确认 |
| lock_release_failed | 锁释放失败,核查现场后再重试 |
| cleanup_failed | 已推送并重载,但旧文件清理失败,不能宣称站点已生效 |
连接、目录、上传和文件替换等阶段也有独立固定诊断。站点 HTTPS 校验继续使用 verification_status,与单台服务器文件推送结果分开判断。
> 验证收尾同步(2026-09-28):最终候选已完成 Windows 独立程序历史备份/升级/成员恢复和 Windows/Linux 构建,产物指纹与最终回归见支持矩阵第二十二节。Linux 为交叉构建,未进行原生运行;本批没有清理生产数据库、执行 SSH 部署或真实服务重启,仍禁止将候选构建通过解释为生产准入。
> 当前运行时候选(2026-09-28):SQLite 驱动固定为 v1.59.0,配套 libc v1.75.7,实测引擎 3.53.4;模式仍为 14。旧 v1.40.1 的专项通过不意味着其引擎满足当前 WAL 数据完整性要求,不使用中间版本替代最终候选。升级需先验证正式备份、历史模式升级及恢复;不直接部署本批工作区或降低 TLS。当前验证与未关闭的 MySQL 索引异常见支持矩阵第二十二节,本节不是生产放行许可。