使用模拟器测试智能撰写结果

本教程将引导您使用 Agent Assist 控制台模拟器测试您的 智能撰写模型的性能。如果您愿意,也可以通过直接调用 API 来执行以下所有操作。您可以使用控制台训练模型并测试其性能,但请注意,所有运行时操作都必须通过直接调用 API 来执行。

准备工作

  1. 如果您使用的是公开提供的对话数据集,请查看相关 文档以指导您 使用这些资源。
  2. 如果您使用的是自己的数据,请确保您已创建一个或多个 对话数据集。模型训练需要至少一个对话数据集。
  3. 创建和部署智能撰写模型 并管理其许可名单。
  4. 创建一个包含智能撰写模型的对话配置文件 。您必须先创建对话配置文件,然后才能使用模拟器。

使用模拟器测试智能撰写模型

  1. 转到 Agent Assist 控制台,然后点击页面左侧的对话配置文件 菜单选项:

  2. 对话配置文件页面会显示您的对话配置文件列表。如需使用模拟器,请点击要测试的对话配置文件最右侧的三个垂直点,然后点击使用模拟器 。模拟器页面随即显示:

  3. 在模拟器中,您可以通过输入文本和评估返回的建议来测试对话配置文件的性能。如果您的对话配置文件配置为启用智能撰写以外的更多功能,您可以通过点击模拟器页面右上角的选项 按钮并进行选择来选择要在模拟中包含的功能。确保已选择智能撰写。

  4. 以下示例测试了当客户联系人工客服取消订单时,智能撰写模型的性能。在此示例中,智能撰写是唯一要测试的功能(在选项 菜单下,所有其他选项(例如智能回复)均未选中)。

    客户通过输入Hi发起对话。人工客服 开始输入H进行回复。输入此字母后,系统会以灰色显示智能撰写建议:

  5. 客服人员可以选择按 Tab 键接受智能撰写建议,也可以继续输入。每次客服人员输入新字符或按 Tab 键接受建议时,系统都会显示新的智能撰写建议。系统会自动生成建议,直到句子完成。在此示例中,客服人员按 Tab 键选择 “How can I help”建议,系统会生成另一个建议以添加到句子中:

  6. 客服人员再次按 Tab 键接受“you today?”建议,并将回复发送给客户。 客户回复“I want to cancel my order”。 客服人员开始输入回复,询问客户订单号。输入D会显示Don't have the option to cancel your order建议,但这不是客服人员想要发送的消息:

  7. 客服人员没有接受建议,而是继续输入。 __输入Do 会显示与输入D相同的建议,因此客服人员输入一个空格以 继续输入句子。输入空格后,系统会显示“Do you know the order”建议,客服人员按 Tab 键接受此建议。客服人员接受下一个智能 撰写建议“number?”,以完成句子“Do you know the order number?”:

  8. 客户回复其订单号。然后,客服人员想要让客户稍等片刻,以便查找订单号。 输入“O”会显示“One moment”建议,客服人员接受此建议。下一个建议是 while I pull,客服人员也接受此建议,然后是up your order.,客服人员也接受此建议。 客服人员将完成的句子发送给客户:

  9. 每次人工客服在回复框中输入字符时,智能撰写都会提供新建议,直到客服人员结束与客户的互动并结束对话。

  10. (可选)智能撰写可以与智能回复结合使用。您必须创建一个对话配置文件,将智能撰写模型和智能回复模型都配置为使用模拟器同时测试这两个功能。如果您在选项 下拉菜单中同时选中了这两个功能,人工客服将在回复框下方看到包含智能回复文本建议的气泡:

  11. 客服人员可以选择智能回复建议,将其复制到回复框中。如果客服人员选择添加其他句子或以其他方式向建议添加字符,智能撰写将提供建议以完成客服人员的句子。