docs: document jimeng provider in AGENTS.md

This commit is contained in:
boos
2026-06-23 12:50:27 +08:00
parent 7b68855c56
commit 294ea7ccea
+19
View File
@@ -45,6 +45,25 @@ ComfyUI Agent 默认走 **本地模式**:复用本服务自身的 `/v1/*` 路
- 【TTS】 → 自动调用 TTS API - 【TTS】 → 自动调用 TTS API
- 【WORKFLOW】 → 输出 ComfyUI 工作流 JSON - 【WORKFLOW】 → 输出 ComfyUI 工作流 JSON
## 即梦 Provider(图片 + 视频)
火山引擎「智能视觉 / CV」异步生成 provider,图片与视频共用一套「提交 → 轮询 → 转存 → 计费」状态机,靠 `capability → req_key` 映射区分能力。
- **能力映射**(`services/jimeng/types.rs` 单一事实源):
- 图片 `JimengCapability::Image` → `req_key = jimeng_t2i_v40`,轮询 ~2s / 超时 ~120s,产物 `image_urls[]`(或 `binary_data_base64[]`),24h 有效
- 视频 `JimengCapability::Video` → `req_key = jimeng_ti2v_v30_pro`,轮询 ~8s / 超时 ~600s,产物 `video_url`,**仅 1h 有效**
- 新增能力(视频3.0 / OmniHuman 等)只加枚举分支,submit/poll/转存逻辑不动
- **签名只当签名器**:用 `volc-visual-sdk` 的 `VisualClient::build_signed_request`(纯签名 V4),HTTP 走 metapi 自己的 async `state.http`,绝不调 SDK 的 blocking `request()`(依赖以 `default-features = false` 引入,不拉 `reqwest::blocking`)。Action 显式传 `CVSync2AsyncSubmitTask` / `CVSync2AsyncGetResult`(Version `2022-08-31`,走 query),业务参数走 JSON body。
- **解析铁律**:先判外层 `code == 10000` 再读 `data.status`(错误响应 `data:null`,顺序反了会 panic);错误码可重试性见 `types::classify`(输入审核类不可重试,QPS/输出审核类可重试,内部错误码视频可重试、图片不重试)。
- **任务模型零迁移**:复用 `background_tasks`(`task_type = jimeng-image-generation` / `jimeng-video-generation`,本地 id `jmi_*` / `jmv_*`),火山 `task_id` 存进 `result_json.volcTaskId`,进度 1=已提交 / 2=生成中 / 3=转存中 / 4=完成。
- **产物转存**:轮询到 `done` 立即 `workspace::record_remote_asset`(视频 1h 过期硬约束,绝不透传火山临时 URL),对外只发本地 `public_id` + `/api/user/workspace/assets/{id}/file`。
- **计费**:复用 `UsageTracker` 的 `record_comfy_task_success/failure`(`model = req_key`,单价来自 `config.jimeng.{image_cost,video_cost}`,首版默认 0)。
- **路由**(鉴权照 `picture_agent` 的 bearer / JWT 解析):
- `POST /api/jimeng/image/jobs`、`POST /api/jimeng/video/jobs` → 立即返回本地 task_id,后台 `tokio::spawn` 轮询
- `GET /api/jimeng/jobs`、`GET /api/jimeng/jobs/{id}`、`POST /api/jimeng/jobs/{id}/cancel`、`GET /api/jimeng/status`
- **配置**:`[jimeng]` 段,AK/SK 走 env(`BOOSAPI_JIMENG__ACCESS_KEY` / `__SECRET_KEY` / 可选 `__SESSION_TOKEN`),不硬编码;`enabled=false` 时路由返回 503「能力未启用」。
- **首版范围**:图生视频只支持 `image_urls`(公网图 URL),前端上传 → 转存留二期;`frames ∈ {121(5s), 241(10s)}`,`aspect_ratio` 白名单。
## 运行 ## 运行
```bash ```bash