Logging audit Dataflow

Cloud Audit Logs untuk Dataflow memungkinkan Anda melacak operasi administratif dan akses data pada resource untuk membantu Anda memantau akses dan perubahan konfigurasi. Anda dapat mengkueri log ini di Logs Explorer dan memeriksa metode Dataflow API mana yang menghasilkan Cloud Audit Logs.

Untuk informasi selengkapnya tentang Cloud Audit Logs, lihat dokumen berikut:

Nama layanan

Untuk melihat log audit Dataflow, lakukan hal berikut:

  1. Di konsol Google Cloud , buka halaman Logs Explorer:

    Buka Logs Explorer

  2. Salin dan tempel kueri berikut ke kolom Query di Logs Explorer, lalu klik Run query.

        protoPayload.serviceName="dataflow.googleapis.com"

Metode menurut jenis izin

Setiap izin IAM memiliki properti type, yang nilainya adalah enum yang dapat berupa salah satu dari empat nilai: ADMIN_READ, ADMIN_WRITE, DATA_READ, atau DATA_WRITE. Saat Anda memanggil metode, Dataflow akan membuat log audit yang kategorinya bergantung pada properti type izin yang diperlukan untuk menjalankan metode. Metode yang memerlukan izin IAM dengan nilai properti type DATA_READ, DATA_WRITE, atau ADMIN_READ akan menghasilkan log audit Akses Data. Metode yang memerlukan izin IAM dengan nilai properti type dari ADMIN_WRITE akan menghasilkan log audit Aktivitas Admin.

Metode API dalam daftar berikut yang ditandai dengan (LRO) adalah operasi yang berjalan lama (LRO). Metode ini biasanya menghasilkan dua entri log audit: satu saat operasi dimulai dan satu lagi saat operasi berakhir. Untuk mengetahui informasi selengkapnya, lihat Log audit untuk operasi yang berjalan lama.
Jenis izin Metode
ADMIN_WRITE dataflow.jobs.create
dataflow.jobs.cancel
OTHER resourcemanager.projects.get: Untuk mengaktifkan log ini, aktifkan ADMIN_READ di bagian layanan cloudresourcemanager.googleapis.com.
resourcemanager.projects.get: Untuk mengaktifkan log ini, aktifkan ADMIN_READ di bagian layanan cloudresourcemanager.googleapis.com.
resourcemanager.projects.get: Untuk mengaktifkan log ini, aktifkan ADMIN_READ di bagian layanan cloudresourcemanager.googleapis.com.
resourcemanager.projects.get: Untuk mengaktifkan log ini, aktifkan ADMIN_READ di bagian layanan cloudresourcemanager.googleapis.com.

Log audit antarmuka API

Untuk mengetahui informasi tentang cara dan izin mana yang dievaluasi untuk setiap metode, lihat dokumentasi Identity and Access Management untuk Dataflow.

google.dataflow.v1beta3.FlexTemplatesService

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.dataflow.v1beta3.FlexTemplatesService.

get

  • Metode: resourcemanager.projects.get
  • Jenis log audit: Akses data
  • Izin:
    • resourcemanager.projects.get - ADMIN_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter untuk metode ini: protoPayload.methodName="resourcemanager.projects.get"

google.dataflow.v1beta3.JobsV1Beta3

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.dataflow.v1beta3.JobsV1Beta3.

create

  • Metode: dataflow.jobs.create
  • Jenis log audit: Aktivitas admin
  • Izin:
    • dataflow.jobs.create - ADMIN_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="dataflow.jobs.create"

cancel

  • Metode: dataflow.jobs.cancel
  • Jenis log audit: Aktivitas admin
  • Izin:
    • dataflow.jobs.cancel - ADMIN_WRITE
    • dataflow.jobs.updateContents - ADMIN_WRITE
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter untuk metode ini: protoPayload.methodName="dataflow.jobs.cancel"

google.dataflow.v1beta3.TemplatesService

Log audit berikut dikaitkan dengan metode yang termasuk dalam google.dataflow.v1beta3.TemplatesService.

get

  • Metode: resourcemanager.projects.get
  • Jenis log audit: Akses data
  • Izin:
    • resourcemanager.projects.get - ADMIN_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="resourcemanager.projects.get"

get

  • Metode: resourcemanager.projects.get
  • Jenis log audit: Akses data
  • Izin:
    • resourcemanager.projects.get - ADMIN_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="resourcemanager.projects.get"

get

  • Metode: resourcemanager.projects.get
  • Jenis log audit: Akses data
  • Izin:
    • resourcemanager.projects.get - ADMIN_READ
  • Metodenya adalah operasi streaming atau yang berjalan lama: Tidak.
  • Filter metode ini: protoPayload.methodName="resourcemanager.projects.get"

Metode yang tidak menghasilkan log audit

Metode mungkin tidak menghasilkan log audit karena satu atau beberapa alasan berikut:

  • Ini adalah metode bervolume tinggi yang melibatkan biaya pembuatan dan penyimpanan log yang signifikan.
  • Nilai auditnya rendah.
  • Audit atau log platform lain sudah menyediakan cakupan metode.

Metode berikut tidak menghasilkan log audit:

  • google.dataflow.v1beta3.DebugCaptureV1Beta3.GetConfig
  • google.dataflow.v1beta3.DebugCaptureV1Beta3.GetWorkerStacktraces
  • google.dataflow.v1beta3.DebugCaptureV1Beta3.SendCapture
  • google.dataflow.v1beta3.JobsV1Beta3.AggregatedListJobs
  • google.dataflow.v1beta3.JobsV1Beta3.CheckActiveJobs
  • google.dataflow.v1beta3.JobsV1Beta3.GetJob
  • google.dataflow.v1beta3.JobsV1Beta3.ListJobs
  • google.dataflow.v1beta3.JobsV1Beta3.SnapshotJob
  • google.dataflow.v1beta3.MessagesV1Beta3.ListJobMessages
  • google.dataflow.v1beta3.MetricsV1Beta3.GetJobExecutionDetails
  • google.dataflow.v1beta3.MetricsV1Beta3.GetJobMetrics
  • google.dataflow.v1beta3.MetricsV1Beta3.GetStageExecutionDetails
  • google.dataflow.v1beta3.SnapshotsV1Beta3.DeleteSnapshot
  • google.dataflow.v1beta3.SnapshotsV1Beta3.GetSnapshot
  • google.dataflow.v1beta3.SnapshotsV1Beta3.ListSnapshots
  • google.dataflow.v1beta3.WorkItemsV1Beta3.LeaseWorkItem
  • google.dataflow.v1beta3.WorkItemsV1Beta3.ReportWorkItemStatus
  • google.dataflow.v1beta3.WorkerMessagesV1Beta3.SendWorkerMessages
  • google.dataflow.v1beta3.mcp.DataflowMcp.GetJobSummary
  • google.dataflow.v1beta3.mcp.DataflowMcp.ListJobSteps
  • google.dataflow.v1beta3.mcp.DataflowMcp.ListJobSummaries