借助 Apache Zeppelin 可选组件,您可以在集群上运行基于 Web 的交互式数据分析。您可以在使用可选组件创建 Managed Service for Apache Spark 集群时安装 Zeppelin,以便在共享笔记本中执行 Spark 工作负载和直观呈现数据。
Zeppelin 笔记本组件是一个基于网页的笔记本,用于交互式数据分析。您可以通过集群的第一个主节点上的 8080 端口访问 Zeppelin Web 界面。
默认情况下,笔记本保存在 Cloud Storage 的 Managed Service for Apache Spark 暂存存储桶中,该存储桶由用户指定,或在创建集群时自动创建。您可以在创建集群时通过 zeppelin:zeppelin.notebook.gcs.dir 属性更改该位置。
安装组件
在创建 Managed Service for Apache Spark 集群时安装组件。 组件可添加到使用 Managed Service for Apache Spark 版本 1.3 及更高版本创建的集群中。
如需查看每个 Managed Service for Apache Spark 映像版本中包含的组件版本,请参阅支持的 Dataproc 版本。
Google Cloud 控制台
- 在 Google Cloud 控制台中,打开创建集群页面。
- 点击其他配置以展开该部分。
- 修改可选组件。
- 在打开的面板中,选中 Zeppelin 笔记本对应的复选框,然后点击保存。
gcloud CLI
如需创建包含 Zeppelin 组件的 Managed Service for Apache Spark 集群,请使用带有 --optional-components 标志的 gcloud dataproc clusters create cluster-name 命令。
gcloud dataproc clusters create cluster-name \ --optional-components=ZEPPELIN \ --region=region \ --enable-component-gateway \ ... other flags
REST API
可以通过 Dataproc API 使用 SoftwareConfig.Component 将 Zeppelin 组件指定为 clusters.create 请求的一部分。打开 Zeppelin 笔记本
请参阅查看和访问组件网关网址,点击 Google Cloud 控制台上的组件网关链接,从而在本地浏览器中打开集群的主节点上运行的 Zeppelin 笔记本界面。