跳到正文
AWS Machine Learning Blog· Alan Yao·· 19 小时前精选AI 评分62

Airbnb 如何在 Amazon Bedrock 上用量化成本运营编码智能体

How Airbnb uses cost per task to operate coding agents on Amazon Bedrock

AI 导读

Airbnb 通过在 Amazon Bedrock 上评估模型得分与“每任务成本”来运营内部编码智能体,并在生产环境通过 CloudWatch 监控延迟、限流与开销。评估体系包含 7 个任务集、多维度评分器及推理强度档位控制;生产侧监控包括延迟、令牌消耗、吞吐量与缓存命中率。该流程使 Airbnb 能够在模型发布后数小时内完成评估并调整智能体配置,使重度用户的成本在切换模型后降至约原来的七分之一。

推荐理由

结合 Airbnb 的一线实践,拆解编码智能体在 Amazon Bedrock 上的成本核算与监控方法,可直接复用到模型选型与容量规划。

来源:AWS Machine Learning Blog · aws.amazon.com