测试集合检索器
在提示模板或 AI 客服人员中使用前,请在 AI 模型检索器游乐场中测试集成检索器配置。将检索犬添加到或移除集合,配置测试数据和结果参数,以验证检索逻辑。
所需的 Edition
| 适用于:Data 360 支持的所有版本。请参阅 Data 360 版本可用性。 |
| 所需用户权限 | |
|---|---|
| 管理 AI 模型中的检索器或版本(创建、编辑、测试和删除) | 允许用户在 AI 模型中管理模型 或者 Data Cloud 架构师权限集 |
| 使用检索器访问数据 | 对于 Knowledge 对象,请确保用户拥有该对象的读取权限,并拥有应用程序权限:允许查看 Knowledge 对于所有其他标准对象,请确保用户拥有对象的读取权限和适当的共享规则。有关更多信息,请参阅设置内部组织范围共享默认设置。 |
另请参阅:
在 Playground 中自定义集合检索器
-
在“检索器”选项卡的 AI 模型中,选择测试检索器。或者,从下拉操作菜单中选择为集合检索器测试检索器。
无法在 Playground 中测试包含 Agentforce 数据库 (ADL) 检索器或自定义 SQL 检索器的集成检索器。
- 选择用于测试猎犬的模式。在基本模式中,猎犬游戏场返回源召回分数和响应时间。在高级模式中,游戏场根据对测试问题的预期答案返回 AI 生成的上下文召回分数。有关度量和成本的更多信息,请查看检索度量和结果以及测试检索器的计费注意事项。
-
选择要测试和验证的集成检索器。
当您搜索猎犬时,只列出有效的猎犬。检索器配置面板显示作为集合检索器一部分的单个检索器。
- 要自定义或重新配置集成检索器,请选择编辑。
-
按数据空间选择或取消选择检索器。
集成检索器最多可以包含 10 个单个检索器。“选择检索器”选项卡显示作为集合一部分的检索器。
-
修改您希望检索器返回的结果数量。
如果用户问题的结果不包括预期的响应,请增加返回的结果数量。
-
通过添加或删除现有字段,自定义检索器返回的字段。
备注 当您保存配置并将其与客服人员一起使用时,检索器会返回这些新字段。 - (可选)打开引用设置以预览和验证来自单个检索器的引用。
测试您的猎犬
配置测试数据并输入自然语言查询,以测试您的检索器。测试数据是期望正确答案的来源。通过集成检索器,所需的源记录可以是不同检索器的一部分。在 Playground 中,您可以从作为集合一部分的每个单独检索器中选择测试数据。
- 要从预期来源测试您的猎犬响应,请选择配置测试数据。
- 在“配置测试数据”窗口中,选择检索器。
-
如果您知道哪些记录包含响应或选择关键字搜索,请选择数据模型对象。
对于关键字匹配的混合搜索检索器,选择按关键字搜索或数据模型对象记录测试数据。否则,您只能按数据模型对象记录进行选择。如果您知道哪些记录包含测试问题的答案,请选择数据模型对象记录。如果您知道您的回复应该包括什么,例如,对于与带薪休假相关的问题,您可以输入“PTO 或休假”,则根据关键字搜索选择记录。
-
对作为集合一部分的每个检索器重复步骤 2 和 3。
您最多可以为集合中的每个单个检索器选择五个测试数据记录。
-
提出测试问题。在高级模式中,您可以根据测试问题的预期答案测试您的寻回犬响应。
运行测试后,“测试检索器”面板会显示检索器检索的文档数量。
在“结果”面板中,查看检索器返回的顶级块与测试数据块之间的重叠。验证带有检索块引用链接的来源的有效性。使用测试数据自定义猎犬配置,以获得最佳响应。将测试的配置保存为新版本。
本文章是否解决您的问题?
请与我们共享您的想法,以便我们进行改进!
