部署后步骤

本页将引导您完成 Cortex Framework 的部署后步骤,以执行数据流水线并验证结果。

部署后,所有转换模板和配置都会被编译并部署到目标 Dataform 代码库。不过,如需在 BigQuery 中实现表和视图,您必须先执行 Dataform 流水线操作。

在 Dataform 中执行转换

通过执行流水线,您可以启动将原始数据转换为相关数据基础层和数据产品层的逻辑,以便立即用于业务。

您可以在 Google Cloud 控制台中手动执行操作以进行验证,也可以为生产环境配置定期运行的时间表。

手动执行验证

如需在 Dataform 工作区内执行整个流水线的手动验证运行,请按以下步骤操作:

  1. 在 Google Cloud 控制台中,前往 Dataform 页面。
  2. 确认您已从项目下拉菜单中选择正确的 Google Cloud 项目。
  3. 点击部署期间创建的代码库的名称(例如 cortex)。
  4. 点击工作区名称(例如 cortex)。
  5. 点击开始执行
  6. 点击执行操作
  7. 选择所有操作。您还可以通过选择特定标记或操作来选择关键的转换子集。
  8. 点击开始执行

验证执行是否成功

如需监控进度并检查流水线是否成功完成,请按以下步骤操作:

  1. 点击执行标签页以查看执行历史记录。
  2. 验证状态是否为已成功完成
  3. 点击执行运行链接,可检查特定操作、编译错误或执行时间的详细信息。

查看 BigQuery 中的数据资产

Dataform 流水线成功执行后,验证生成的数据集,并在 BigQuery 中查看具体化表。

  1. 在 Google Cloud 控制台中前往 BigQuery
  2. 找到 config.yaml 文件中配置的目标数据集(例如,模块的 dataTargetId 引用的 data.targets 条目中由 datasetId 标识的数据集)。例如,在模板配置中,这些数据集可能如下所示:
    • 数据基础层:查找与基础目标 ID(默认配置为 cortex7_sap_data_foundation)匹配的数据集。
    • 数据产品层:查找与您的产品目标 ID(默认配置为 cortex7_data_products)匹配的数据集。
  3. 预览表格并运行示例查询,以验证表格是否填充了预期记录。

后续步骤

现在,您的数据系统已正常运行,您可以探索如何执行以下操作:

  • 在 Knowledge Catalog 中注册数据产品:请参阅 Knowledge Catalog 集成] (/cortex/docs/knowledge-catalog) 文档,了解如何自动执行注册流程。
  • 扩展数据模型:请参阅可扩展性指南,了解如何自定义架构或实例化新模块。
  • 构建新数据产品或自定义数据产品:如需开始使用,请参阅用于构建数据产品的 Agentic 技能文档。