Modèles Dataflow

Google fournit des modèles Dataflow Open Source que vous pouvez utiliser pour traiter vos données Bigtable au lieu d'écrire du code de pipeline. Cette page répertorie les modèles Bigtable - Dataflow disponibles.

Streaming templates

Utilisez les modèles suivants pour traiter des données en continu.

• Flux de modifications de Bigtable vers BigQuery
• Flux de modifications de Bigtable vers Pub/Sub

Batch templates

Utilisez les modèles suivants pour traiter des données de manière groupée.

• Apache Cassandra vers Bigtable
• Cloud Storage Avro vers Bigtable
• BigQuery vers Bigtable
• Bigtable vers Cloud Storage Avro
• Bigtable vers Cloud Storage JSON
• Bigtable vers Cloud Storage Parquet
• Bigtable vers Cloud Storage SequenceFile
• Modèle de flux de modifications Bigtable vers Vector Search
• Modèle Bigtable vers Vector Search
• Cloud Storage Parquet vers Bigtable
• Cloud Storage SequenceFile vers Bigtable

Étape suivante

• Consultez la liste complète des modèles fournis par Google.

• En savoir plus sur les flux de modifications

• Suivez un tutoriel sur l'exportation de Bigtable vers Vertex AI Vector Search.

• Utilisez Apache Beam et Bigtable pour enrichir les données.