x

2026-03-30 03:55:57 +08:00
parent 1a61a7bb17
commit f82de29267
5 changed files with 14 additions and 0 deletions
@@ -30,6 +30,7 @@

 - `services.openai.host` / `services.openai.port`：OpenAI 协议服务监听地址与端口（默认 `0.0.0.0:8001`）
 - `public_model_name`：对外固定模型名，切换底层模型时可保持调用方参数不变
+- `default_enable_thinking`：服务端默认思考开关，默认 `false`（即调用方不传时也关闭）
 - `reasoning_enabled`：是否启用推理解析器参数注入，默认 `false`
 - `api_key`：OpenAI 接口访问密钥
 - `tensor_parallel_size`：张量并行数，双卡建议 `2`
@@ -93,6 +94,7 @@ curl -X POST "http://localhost:8001/v1/chat/completions" \
 - API Key 使用 `config.json` 中 `api_key`
 - 模型名固定使用 `config.json` 中 `public_model_name`（默认 `Qwen_local_model`）
 - 思考模式按请求控制：`chat_template_kwargs.enable_thinking=false/true`
+- 若调用方未传 `chat_template_kwargs.enable_thinking`，服务端使用 `default_enable_thinking` 兜底
 - 仅当模型需要推理解析器时，再将 `config.json` 中 `reasoning_enabled` 设为 `true`
 - 若使用工具调用，`config.json` 中应配置 `tool_call_parser` 与 `enable_auto_tool_choice`
 - 服务强制离线模式，不会回退到 Hugging Face 远程下载