Roteador que gerencia tráfego de inteligência artificial
Desenvolvido pela NVIDIA, Switchyard é um mecanismo de inferência de inteligência artificial de alto desempenho escrito em linguagem Rust. Ele oferece um ambiente de tempo de execução otimizado para executar modelos de linguagem grandes (LLM) com eficiência em diferentes infraestruturas de hardware.
Atualizações
- 31 de agosto de 2026: Estrelas 1,566 → 2,617, versão mais recente v0.2.0 (10 de agosto de 2026).
- 15 de agosto de 2026: Estrelas 923 → 1,566, versão mais recente v0.2.0 (10 de agosto de 2026).
O que você ganha
- Roteando o tráfego entre diferentes modelos de inteligência artificial
- Tradução entre formatos OpenAI e API Anthropic
- Rastreie métricas de transações e logs de erros
Instalação
curl -LsSf https://astral.sh/uv/install.sh | sh
source "$HOME/.local/bin/env"
uv tool install --python 3.10 "nemo-switchyard[cli]"cargo install --locked switchyard-server
switchyard-server --helpExecução
curl http://localhost:4000/healthSe você não programa
Atue como um roteador de tráfego de IA para mim. Usando o Switchyard, quero que você distribua as solicitações dos meus agentes de codificação como Claude Code ou Codex entre diferentes modelos, traduza automaticamente entre os formatos OpenAI e API Anthropic e monitore todas as métricas operacionais. Gerencie solicitações recebidas com algoritmos de roteamento estruturados e realize testes A/B ou balanceamento de carga entre diferentes modelos quando necessário.
Termos relacionados do glossário
Links
A TreScout não desenvolveu esta ferramenta · nós a encontramos nas tendências do GitHub e a apresentamos. Esta página descreve o repositório em 2026-08-13: A contagem de estrelas e o nosso texto são daquele dia, o repositório pode ter mudado desde então. Consulte o link do repositório para ver o estado atual. Esta página foi traduzida automaticamente do original em turco · a versão turca é a que vale.