Switchyard(NVIDIA NeMo)
在 OpenAI Chat、OpenAI Responses、Anthropic Messages 三种协议之间翻译,把请求路由到 vLLM、NVIDIA NIM、Ollama 或任意 OpenAI 兼容端点,并记录请求、错误、延迟、token 和路由开销等 Prometheus 指标。
一句话商业模式
为使用编码智能体的开发者、自建 LLM 网关的工程团队解决编码智能体难以接入开源模型、多模型路由与协议翻译复杂,通过Switchyard Rust 代理/库(Apache-2.0)提供价值,主要依靠潜在企业服务/托管(假设),暂无公开收费赚钱
商业模式画布
一个 Rust 代理/库,透明完成协议翻译、路由决策和指标采集,让智能体继续用原生 API,同时后端可自由选择开源模型
评分解析
研究分 66
这是什么
- 是什么
- 一个由 NVIDIA NeMo 团队用 Rust 编写的 LLM 流量代理与库(Apache-2.0),可独立部署为 switchyard-server,也可作为 Rust crate 嵌入现有网关/代理。
- 给谁用
- 使用 Claude Code/Codex CLI/OpenClaw 等编码智能体的开发者,以及需要构建多模型路由、A/B 测试、分级调用的 LLM 基础设施团队。