cjw/geMoldInsight
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
345 Commits 1 Branch 0 Tags
f87cd8a68e162bf4338d08bf8aad317b09b80ad9
Commit Graph

18 Commits

Author SHA1 Message Date
cjw f87cd8a68e fix(deploy): celery worker --pool=solo——prefork 守护进程禁止 spawn OCC 子进程 
Celery prefork 的 worker 子进程是 daemonic，multiprocessing 硬性禁止
守护进程再生子进程：OccProcessPool（spawn 拉起 OCC 常驻工作进程）在
celery worker 内首次 run 即报 "daemonic processes are not allowed to
have children"，解析任务全部 failed。该池在 FastAPI 主进程内无此限制
——celery 路径的分析从未真正工作过。

改用 --pool=solo：任务在 celery 主进程（非守护）内执行，允许 spawn；
天然单任务串行，与 processing_service / redis_task_manager / db_manager
等模块级单例的 asyncio.Lock（不可跨循环并发）匹配。吞吐扩展走横向
加容器副本。CELERY_CONCURRENCY / MAX_TASKS_PER_CHILD 随之移除。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-27 00:01:05 +08:00
cjw a889671bb5 🔧 build(deploy): 取消宿主端口映射的默认值——.env 必须显式配置 
三个 compose 文件的 ports 映射去掉 ${VAR:-默认值} 兜底：

- docker-compose.yml: frontend ${FRONTEND_PORT:-10003} → ${FRONTEND_PORT}
- docker-compose.moldinsight.yml: moldinsight ${MOLDINSIGHT_PORT:-10003} → ${MOLDINSIGHT_PORT}
- docker-compose.inventory.yml: inventory ${INVENTORY_PORT:-10004} → ${INVENTORY_PORT}

端口必须由 .env 显式配置，否则 compose 启动期 fail-fast（避免悄悄用了
某个端口导致宿主端口冲突或调试时困惑）。

注：DB_PORT:5432 / REDIS_PORT:6379 等应用行为默认值保留（与"宿主机
端口"不同，属基础设施默认端口，不影响端口暴露策略）。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 21:00:59 +08:00
cjw aaf887507f 🐛 fix(deploy): backend 宿主机端口受 .env BACKEND_PORT 控制 
上一版 backend 写死 expose: ["8000"]（不暴露宿主），但这违背"全局服
务的最终映射到宿主机只能受 .env 中的端口配置决定"的原则——调试场景下
.env 没办法把 backend 暴露到宿主。

修正：backend ports 改为 "${BACKEND_PORT:-}:8000"，由 .env 决定：
- BACKEND_PORT 留空/未设 = 不暴露宿主端口（仅经前端 /api 反代）
- BACKEND_PORT=10003 = 暴露宿主 10003（调试 / 压测用）

.env.example 同步加注释说明。

验证：模拟 .env 两种场景下，端口映射完全由 BACKEND_PORT 决定。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 20:58:10 +08:00
cjw b934b737e8 🐛 fix(deploy): 修 unified backend 与 frontend 抢占宿主 10003 冲突 
上一版把 frontend 与 backend 都映射 10003:8000，会触发 docker 启动时
"bind: address already in use"。修正：

- docker-compose.yml backend ports 改为 expose: ["8000"]——不映射宿主机，
  仅在 docker 网络 gemold_network 内被 frontend 经 backend:8000 反代访问
- .env.example 删除 BACKEND_PORT 字段（不再需要）
- PORT_CONFIG / DEPLOY_PORT 端口映射表/示例同步：unified backend 不暴露
  宿主机端口，统一经前端 /api 反代

验证：yaml 渲染后无任何 service 对抢宿主端口（unified 仅 frontend 暴露
$FRONTEND_PORT=10003；moldinsight-only 仅 moldinsight 暴露 10003；
inventory-only 仅 inventory 暴露 10004）。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 20:56:20 +08:00
cjw cf465d28e2 🔧 build(deploy): frontend 容器内端口 80→8000——避免占用宿主 80 
- deploy/Dockerfile.frontend EXPOSE 80 → 8000
- deploy/nginx/frontend.conf listen 80 → 8000
- docker-compose.yml frontend ports "${FRONTEND_PORT:-10003}:80" → ":8000"

容器内端口统一 8000 系列（backend=8000、inventory=8001、frontend=8000），
frontend 不再抢占 80（留给外层 nginx/监控）；1024+ 无需 root 权限。
宿主机端口（10003）保持不变。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 20:53:21 +08:00
cjw e65dcc2d39 🔧 build(deploy): 端口默认值统一 10003/10004——前端入口固定 10003 
约定"容器内部端口无所谓，重要的是宿主机端口；前端 = 10003"。

- .env.example 端口段重写：移除冗余 HOST/PORT（uvicorn 命令硬编码，
  无人读 env）+ 移除误导注释；FRONTEND_PORT/BACKEND_PORT/MOLDINSIGHT_PORT
  默认 10003，INVENTORY_PORT 默认 10004
- docker-compose.yml frontend 默认 80→10003、backend 8000→10003，删除
  backend service 内冗余 HOST/PORT env
- docker-compose.moldinsight.yml / docker-compose.inventory.yml 默认
  端口同步
- DEPLOY_PORT §3 / PORT_CONFIG §1 §2 端口映射示例同步
- STATUS 补录

验证：yaml 渲染端口映射 unified frontend 10003→80、backend 10003→8000，
moldinsight 10003→8000，inventory 10004→8001。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 20:45:38 +08:00
cjw 8f8a7ea00a 🐛 fix(deploy): celery worker 启动命令移除 --workdir（celery 5.x 已移除） 
部署机实测：celery worker --workdir=/app/src 报
"No such option '--workdir'"（旧 Dockerfile.celery 用的参数，
celery 4.x 兼容，5.x 已删除；项目锁的是新版本）。

修复：compose 的 moldinsight-celery command 改为
  cd /app/src && exec celery -A celery_app worker ...
直接切到 src/ 目录启动 worker（celery_app.py 内 include=
["celery_tasks"] 是裸模块名，需在 src/ 下才能解析），不依赖
celery 版本是否支持 --workdir。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-26 20:01:05 +08:00
cjw 2fd1b3da21 🐛 fix(deploy): 修干净机器首次构建两处必挂——.dockerignore 排除 deploy/ + celery 并行构建依赖 
部署机首次 docker compose up -d 实测暴露：

- .dockerignore 自"重写独立dockerfile"起排除整个 deploy/，而
  Dockerfile.frontend COPY deploy/nginx/frontend.conf、Dockerfile.moldinsight
  COPY deploy/requirements-*.txt → COPY not found。历史一直有旧镜像兜底未暴露；
  BuildKit 不支持重包含被排除目录的子文件，直接移除该行
- Dockerfile.celery FROM gemold-backend:latest 在 compose 并行构建下引用
  尚不存在的本地镜像必挂 → 删除 Dockerfile.celery，moldinsight-celery 改为
  与 API 服务同一 build 声明 + 同一 gemold-backend:latest tag（compose 去重
  只构建一次），celery 仅以 command: 覆盖启动 worker，参数语义不变
- build.sh/.bat 移除 gemold-celery 构建步骤；OPERATIONS / OCC_THROUGHPUT /
  TECH_DEBT / .env.example 的 Dockerfile.celery 指向同步改写；STATUS 补录

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-24 16:18:44 +08:00
cjw 4373fafd55 🐛 fix(deploy): 移除服务 profiles——裸 up / 裸 -f 恢复一键可用 
compose 规则：声明了 profiles 的服务在不带 --profile 时永远不会被选中。
拆分首版保留 profiles（双保险设计）导致部署机实测 docker compose up -d
与 -f <file> up -d 均报 "no service selected"，与"一键部署、换文件名换
模式"的核心诉求互斥，故彻底移除：

- 三个 compose 文件的全部 services 去掉 profiles 块，模式切换唯一入口 = -f 文件名
- 历史 --profile full/moldinsight/inventory 写法随之失效（目标服务本就已
  移出默认文件，兼容无意义）；文档/构建脚本提示/STATUS 日志同步改为失效声明
- frontend/README 移除"仅起前端"用法（前端反代依赖 unified backend，推荐整栈）

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-24 16:09:26 +08:00
cjw a548623ea5 📦 build(deploy): Compose 按部署模式拆分三文件——换文件名即换模式一键部署 
- docker-compose.yml（unified 默认入口）/ docker-compose.moldinsight.yml / docker-compose.inventory.yml 三文件一一对应三种部署模式，profiles 字段保留（--profile 旧命令双保险可用）
- 修复两个既有部署隐患：moldinsight-only 场景 celery depends_on 悬空；moldinsight service image 统一为 gemold-backend:latest 与 Dockerfile.celery FROM 对齐（废弃 gemold-moldinsight tag）
- gemold_network / uploads_data / html_data 固定 name 命名；inventory-only 不声明卷避免空卷；每文件内 x-base-env anchor 收敛重复 environment（SECRET_KEY/ADMIN_PASSWORD fail-fast 保留）
- 文档同步 11 处：DEPLOYMENT §1.1 一键部署总表 + §2 三模式命令、LINUX_SETUP §6/§11、README、OPERATIONS §4、build.sh/.bat 提示、PORT_CONFIG / DEPLOY_PORT / STORAGE_SETUP / frontend/README
- STATUS.md 补 2026-09-24 批次日志

验证：三文件 YAML 结构静态校验通过；5 个 service environment 键与拆分前逐一比对零丢失（39/39、34/34、39/39、34/34、20/20）

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-24 15:28:13 +08:00
cjw e728dcd226 批次4后续专项完成：D11清偿 + OCC方案B实施 + 部署参数 + D2诚实标注 + CI门禁 
① D11 HTML 报告 RustFS 单源化（TECH_DEBT P2 清偿）：可视化产物写任务临时目录后
   裸传报告键 html/reports/{filename}（文件名寻址），/html StaticFiles 挂载删除，
   新增 html_report_router 根路径代理（报告键→遗留 JSON 包装→本地卷兜底→404，
   防穿越）；URL 形状 /html/{filename} 不变，持久化引用零迁移；celery 摘除
   html_data 卷，镜像不再烤入陈旧报告；顺带删除 get_stp_file_with_data 死数据块
② OCC 方案 B（D10 清偿）：run_occ(op_name, payload) 契约 + 常驻工作进程池
   （occ_process_pool + occ_worker 操作注册表），超时/崩溃 terminate 换新补位、
   任务级超时 recover 整体重建，残留线程泄漏根治；TopoDS 不跨进程（generate_cavity
   分模 + 方案 STEP 持久化全在子进程内，返回 export_manifest）；删除内存形状缓存链、
   CADExporter.export_mold_results、shape_loader（→ stp_materializer）
③ OCC 方案 A 部署参数：CELERY_CONCURRENCY / CELERY_MAX_TASKS_PER_CHILD 进
   Dockerfile.celery + compose + .env.example
④ D2 诚实标注：铝价响应带 source: "simulated"，前端按来源渲染标注（原硬编码
   "上海期货交易所"属虚假声明），死代码 getAluminumPrice 删除
⑤ CI 门禁：.gitea/workflows/ci.yml 三 job（pytest / 前端构建含 vue-tsc /
   openapi 漂移检测）

接口变更三件套随批完成（openapi 76→77 paths + gen:api + 前端构建通过；方案 B
接口面零变化）。测试基线 143 passed, 0 skipped（新增 16 项）。文档六处同步。

Co-Authored-By: Claude Code <noreply@anthropic.com>
 2026-09-18 17:22:01 +08:00
cjw 4537faf2c4 优化 2026-09-16 17:55:04 +08:00
cjw bee439cf34 x 2026-08-31 18:01:34 +08:00
cjw 3ea59551db 模块拆分 init 2026-08-27 14:53:22 +08:00
cjw 44902207c9 增加celery任务队列，任务持久化（服务重启不丢）、支持多 Worker 水平扩展、失败自动重试 2026-05-28 17:59:39 +08:00
cjw 191ac77d15 init 2026-03-15 13:33:47 +08:00
cjw aa1c91b818 init 2026-02-13 00:29:12 +08:00
cjw 7b09eb3d89 init 2026-02-12 23:27:42 +08:00