📦 Ollama Load Balancer — Ollama 负载均衡器 — 跨机器 AI 推理负载均衡
v1.0.4Ollama 负载均衡器支持 Llama、Qwen、DeepSeek 和 Mistral 等 AI 模型在多台机器上的分布式推理,通过 mDNS 自动发现、健康检查等实现负载均衡。
0· 193·3 当前·3 累计
运行时依赖
🖥️ OSmacOS · Linux · Windows
安装命令
点击复制官方npx clawhub@latest install ollama-load-balancer
镜像加速npx clawhub@latest install ollama-load-balancer --registry https://cn.longxiaskill.com镜像同步中
技能文档
简介
Ollama 负载均衡器支持 Llama、Qwen、DeepSeek 和 Mistral 等 AI 模型在多台机器上的分布式推理,通过 mDNS 自动发现、健康检查等实现负载均衡。使用场景
- 跨机器 AI 推理
- 自动化负载均衡