Releases: shell-nlp/gpt_server
Releases · shell-nlp/gpt_server
gpt_server v0.7.0
gpt_server v0.6.10
gpt_server v0.6.10
What's Changed
- 升级 vllm==0.13.0 lmdeploy==0.11.1 sglang==0.5.7
gpt_server v0.6.9
gpt_server v0.6.9
What's Changed
- 升级 vllm==0.13.0 lmdeploy==0.11.0 sglang==0.5.6.post2
gpt_server v0.6.8.1
gpt_server v0.6.8.1
What's Changed
- 支持 jinaai/jina-reranker-v3 模型
- 支持 z-image 文生图模型
gpt_server v0.6.7
gpt_server v0.6.7
What's Changed
1.修复tool_prarser index 为None
2.升级 sglang==0.5.5
3.支持 lmcache,后端默认开启 进一步提高长上下文推理的吞吐量
gpt_server v0.6.6
gpt_server v0.6.6
What's Changed
- 支持qwen-image #44
- 升级 lmdeploy==0.10.2 sglang==0.5.4
- 支持 qwen3-ranker vllm 后端
- 支持 Response API
gpt_server v0.6.5
gpt_server v0.6.5
What's Changed
- 更新 vllm==0.11.0 sglang==0.5.3.post1
gpt_server v0.6.4
gpt_server v0.6.4
What's Changed
- 更新lmdeoploy == 0.10.0 vllm==0.10.2 sglang==0.5.2
gpt_server v0.6.3
gpt_server v0.6.3
What's Changed
- vllm 多模态 支持 enable_thinking
- 优化lmdepoly 后端 logger prompt
- 更新lmdeoploy == 0.10.0
- 优化项目架构
- 添加 autoawq
- 优化项目冗余代码
- 删除遗留代码
gpt_server v0.6.2
gpt_server v0.6.2
What's Changed
- 升级SGLang、vLLM、LMDepoy 到最新版本
- 支持图片编辑模型、兼容open AI 图片编辑接口
- 修复 vllm guided decoding
- 修复 lmdeploy backend 模板bug
- 优化项目架构,使用pydantic BaseSettings统一模型配置获取
- 移除 muti fuction call,保证 function calling 的稳定性
- 添加 enable_thinking 参数