L

Skill Entry

LiteLLM Router 回退就绪度核查

将 LiteLLM 路由文档转化为上线前清单:核对主/备部署、重试与负载策略;经 Proxy 时验证虚拟密钥与费用;通过可控主路故障演练确认回退触发;若用 MCP Gateway 则检查 store_model_in_db 与 SEP-986 命名。

分类 运营
平台 LiteLLM
发布时间 2026-05-19
litellmroutingfallback

使用场景

  • 新助手上线需扛限流
  • 迁移到多厂商 Router
  • 启用 MCP Gateway 前评审
  • 季度灾备演练
  • 成本优化加备模型

主要功能

  • 盘点 model_name 与主备角色
  • 记录重试/超时/冷却配置
  • 演练主部署故障观察 fallback
  • 核对 Proxy 预算与护栏
  • 检查 MCP 持久化与命名合规
  • 填写 sign-off 表

相关推荐

相关推荐

3 收录条目