历史简报 · 2026-11-11

亚马逊 Bedrock 在 AgentCore 中引入 DeepEval 和 AutoEval,帮开发者更好测试 AI 智能体

据AWS Machine Learning发布的信息:把 AI 智能体放到线上使用很难评估它到底有没有干好活,传统指标往往会漏掉诸如泄露隐私等严重问题。亚马逊 Bedrock 的 AgentCore 评估功能迎来更新,直接把 AWS 自家评估工具 和开源的 DeepEval、AutoEval 整合在了一起。

Polyemergence 编辑配图 · 非原文图片

据AWS Machine Learning发布的信息:

评估难题与核心思路

当 AI 智能体上线后,只看运行速度或简单的输出结果远远不够。一个客服智能体虽然解决了问题,却可能在聊天中泄露用户的个人隐私。为了解决这类隐蔽的失败,亚马逊 Bedrock 的 AgentCore 评估功能教大家从实际业务结果出发,把抽象的成功目标拆解为具体的行为,并用对口的评估器来进行打分。

丰富的评估工具库

AgentCore 整合了三种来源的评估器。AWS 自带的工具主要负责检查回答质量、任务完成度和安全性;第三方开源工具 DeepEval 和 AutoEval 则专注于解决多轮对话中的遗漏、记忆丢失和恶意攻击等复杂问题。如果这些还不够,开发者还可以自定义多维度的评估规则,一次性给多个指标打分。

三种灵活的运行模式

为了方便在不同阶段使用,AgentCore 提供了三种运行方式,并且它们都使用完全相同的评估器 ID。开发者可以在开发调试时使用即时评估,在生产环境中进行在线抽样监控,或者在发布新版本前用批处理评估来做回归测试,确保新代码没有引入旧问题。

查看筛选依据
官方发布阶段未明确

重要性 78/100

信号80结构80影响75可信度88热度70
关于这篇简报
内容类型
新闻摘要
信源类型
第一方/官方来源
原文发布时间
处理方式
AI 辅助发现、翻译、摘要、分类与评分;编辑标准和纠错由编辑部维护。
核验边界
保留原始链接与发布信息;除非特别说明,本简报不构成独立事实核查。
发布方
Polyemergence Editorial Desk · PolyEmergence Pte Ltd.
利益冲突
无已声明的财务或商业利益冲突。

编辑标准 → · 纠错记录 →

POLYEMERGENCE / EXPLORE

继续探索

顺着这条线索,看看它从哪里来,又走到了哪里。

探索人工智能历史报道 →