#NVIDIA NeMo Switchyard

共 1 条 · 7 天 1 条 · 30 天 1 条
信息流里打上「NVIDIA NeMo Switchyard」标签的资讯、产品与论文,按刊登时间排,新的在上。
11月14日
技巧Agent 与开发者官方一手06:37
用 NVIDIA NeMo Switchyard 在 Amazon Bedrock 上按任务路由编程 Agent 请求

编程 Agent 跑任务,真正该看的指标是每解决一个任务花多少钱,不是每 token 单价。这篇教程手把手用 AWS CDK 部署 LiteLLM 加 NVIDIA NeMo Switchyard,把请求路由到 Bedrock 上的不同模型,再和单模型基线比成本。自己搭 Agent 团队、想在强模型和便宜模型之间省钱的开发者可以直接照着抄。

事件专题
官方一手AWS Machine Learning Blog@Aswath Ram A Srinivasan原文