借助 Knowledge Catalog(以前称为 Dataplex Universal Catalog)中的数据网域,您可以将企业数据资源整理并精选到反映业务结构和所有权的逻辑层次结构中。然后,您可以大规模管理元数据可见性、捕获共享治理上下文,并将数据发现范围限定为特定业务网域。
数据域的关键功能
数据域将逻辑数据组织与文件夹和项目的底层 Google Cloud 资源层次结构分离开来。数据网域提供以下关键功能:
- 定义与您的业务流程和数据逻辑分组保持一致的逻辑数据组织层次结构,并与 Google Cloud 文件夹和项目的资源层次结构分离。
- 作为去中心化领域团队的逻辑所有权单元,对数据产品进行补充。
- 集中控制谁可以大规模发现资源及其元数据。
- 捕获常见上下文,例如使用指南、治理标准、说明和所有权信息。
- 使用数据网域可将搜索结果范围缩小到特定网域。例如,允许用户仅在
Marketing网域内进行搜索,以便更快地发现更相关的内容。 - 基于领域背景为 AI 智能体建立依据。
lookupContext方法会返回数据网域的上下文,并指明数据资源属于哪些数据网域。如需了解详情,请参阅检索数据网域的上下文。
用例示例
假设有一家全球零售企业,其数据资产分散在销售、供应链和营销等部门。逻辑上相似的数据资产(例如与销售相关的表或数据集)分散在多个 Google Cloud项目中,导致难以发现和进行一致的治理。
以下示例展示了各种用户如何与数据网域互动:
数据域管理员
建立一个独立于底层Google Cloud 项目的逻辑层次结构,并委托网域级治理。
- 创建与组织结构匹配的顶级域名(例如
Sales、Supply Chain和Marketing),并配置子网域(例如Sales下的Online Sales和Store Transactions)。 - 为每个网域分配指定的数据网域所有者(例如,将销售主管分配为
Sales网域的所有者)。
如需详细了解如何创建数据网域层次结构并添加资源,请参阅创建数据网域和在数据网域中添加资源。
- 创建与组织结构匹配的顶级域名(例如
数据域所有者
定义其所有权下的数据网域的内容:将数据资产纳入网域,定义网域范围内的上下文,并针对网域建立元数据政策,以大规模管理网域数据资产的可发现性以及其上下文和元数据的可见性。例如,销售网域数据所有者执行以下操作:
- 将分散在不同项目中的数据集、表和数据产品纳入
Sales网域。 - 定义网域级方面,例如数据保留标准和成本中心。通过向
analysts@example.com群组授予所需角色和权限,定义谁可以发现网域的资产并访问其上下文和元数据。
如需详细了解如何管理数据网域,请参阅管理数据网域。
- 将分散在不同项目中的数据集、表和数据产品纳入
数据域用户
在业务环境中高效发现相关、可信的销售资产,而无需筛选不相关的企业数据。例如,如需获取即将开展的营销活动的销售数据,数据网域用户需要执行以下操作:
- 探索网域层次结构,以确定
Sales网域。 - 将搜索范围限定在网域内,以查找相关资源。
- 检查资源元数据、架构和使用指南,以评估其是否适合使用。
如需详细了解如何使用数据网域查找相关数据,请参阅使用数据网域。
- 探索网域层次结构,以确定
支持的资源
您可以将数据网域用于以下资产:
- 项目
- 数据产品
- BigQuery 数据集
- BigQuery 表
- Dataform 代码库
- Dataproc Metastore 数据库
- Dataproc Metastore 表
- Spanner 数据库
- BigLake 表
- AlloyDB for PostgreSQL 实例
- Gemini Enterprise Agent Platform 数据集
数据域和数据产品
数据网域和数据产品是互补的基础组件,可用于发现和访问数据资产。 数据网域提供了一种根据业务结构组织数据资产的逻辑方式。数据产品将相关资产(例如表或视图)打包成精选捆绑包,旨在解决特定的商业用途。
限制
搜索限制
当您在网域上下文之外搜索资源时(例如使用全局搜索),网域的可检测性权限不适用。您只能看到您在底层系统(例如 BigQuery)中有权访问的资源。
假设某个 BigQuery 数据集包含在数据网域中。您拥有该网域的 Dataplex Data Domain Entry Reader 角色,但没有直接在 BigQuery 中查看数据集的权限:
- 在网域内搜索:由于网域权限适用,您会在搜索结果中看到该数据集。
- 在网域外搜索:您不会在搜索结果中看到该数据集。在宽泛搜索中,网域权限不适用,并且您在 BigQuery 中没有直接访问权限。
授权限制
在预览版发布阶段,没有持续的后台 IAM 同步。只有在创建绑定时,系统才会验证网域授权。这意味着,如果您撤消网域主账号对某项资源的 IAM 角色,该资源不会自动解除绑定或从网域中移除。
后续步骤
- 了解如何创建数据网域。
- 了解如何管理数据网域。
- 了解如何在数据网域中添加资源。
- 了解如何使用数据网域。