Ringkasan Key Visualizer

Key Visualizer adalah alat diagnostik interaktif yang memungkinkan Anda menganalisis pola akses dan penggunaan Bigtable di seluruh tabel. Anda dapat menggunakan peta panas visualnya untuk mendeteksi bottleneck performa, mengidentifikasi hotspot, dan mengoptimalkan desain skema Anda.

Apa itu Key Visualizer?

Key Visualizer adalah alat yang membantu Anda menganalisis pola penggunaan Bigtable. Laporan ini menghasilkan laporan visual untuk tabel Anda yang mengelompokkan penggunaan Anda berdasarkan row key yang Anda akses.

Key Visualizer dapat memberikan insight tentang pola penggunaan dalam skala besar yang sulit dipahami. Penggunaan Key Visualizer meliputi:

  • Mendesain skema secara iteratif atau meningkatkan desain skema yang ada. Di setiap iterasi, Anda memeriksa Key Visualizer untuk menemukan masalah yang mungkin disebabkan oleh skema Anda, lalu menyesuaikan skema dan memeriksa lagi.
  • Memecahkan masalah performa.
  • Memahami dengan lebih baik cara Anda mengakses data yang disimpan di Bigtable.

Untuk mencapai tujuan ini, Visualisasi Kunci dapat membantu Anda menyelesaikan tugas berikut:

  • Periksa apakah operasi baca atau tulis Anda membuat hotspot pada baris tertentu
  • Menemukan baris yang berisi terlalu banyak data
  • Periksa apakah pola akses Anda seimbang di semua baris dalam tabel

Meskipun Key Visualizer menampilkan berbagai metrik, Key Visualizer tidak menampilkan setiap metrik yang dapat memengaruhi performa Bigtable. Misalnya, jika ada masalah jaringan antara aplikasi Anda dan Google Cloud, masalah jaringan tersebut mungkin tidak terlihat, atau mungkin muncul sebagai deretan vertikal di semua kunci di Key Visualizer, yang hanya memberi Anda petunjuk tentang kapan masalah terjadi. Jika Anda tidak dapat mengidentifikasi penyebab masalah performa dengan melihat pemindaian Key Visualizer, Anda harus melakukan pemecahan masalah tambahan.

Pemindaian Key Visualizer

Gambar berikut menunjukkan pemindaian Key Visualizer. Setiap pemindaian mencakup beberapa jenis informasi yang berbeda:

  • Peta panas besar, yang menunjukkan pola akses untuk sekelompok kunci baris dari waktu ke waktu.
  • Nilai gabungan di sepanjang setiap sumbu peta panas, termasuk nilai rata-rata dan nilai total atau maksimum.

Contoh pemindaian Key Visualizer

Key Visualizer juga menyediakan alat untuk membantu Anda memahami data di setiap pemindaian. Jika Anda belum pernah menggunakan Key Visualizer, lihat Mulai Menggunakan Key Visualizer untuk mengetahui petunjuknya. Jika Anda adalah pengguna yang lebih berpengalaman, lihat Menjelajahi Peta Panas untuk mengetahui detailnya.

Peta Panas

Inti pemindaian Key Visualizer adalah peta panas, yang menunjukkan nilai metrik dari waktu ke waktu, yang dipecah menjadi rentang row key yang berdekatan. Sumbu x peta panas mewakili waktu, dan sumbu y mewakili row key. Jika metrik memiliki nilai rendah untuk sekelompok row key pada suatu waktu, metrik tersebut "dingin", dan muncul dalam warna gelap. Nilai tinggi adalah "panas", dan tampil dalam warna cerah; nilai tertinggi muncul dalam warna putih.

Berbagai jenis penggunaan menghasilkan pola visual yang berbeda dalam peta panas, yang memungkinkan masalah didiagnosis secara sekilas. Lihat Pola Heatmap untuk melihat contoh beberapa pola umum.

Secara default, peta panas Key Visualizer menampilkan metrik Ops, yang mewakili jumlah gabungan operasi baca dan tulis. Anda dapat beralih ke peta panas untuk metrik yang berbeda kapan saja. Lihat Beralih metrik untuk mengetahui detailnya.

Anda juga dapat melihat lebih dari satu metrik sekaligus, yang dapat membantu Anda menemukan hubungan antara berbagai metrik.

Row key hierarkis

Row key sering kali terdiri dari hierarki nilai, dengan setiap nilai dipisahkan oleh pemisah. Misalnya, row key memusage#1423523569918 berisi ID untuk semua baris yang menangkap penggunaan memori, diikuti dengan stempel waktu yang mengidentifikasi set data tertentu dalam grup tersebut.

Key Visualizer otomatis mengenali jenis row key ini dan menguraikannya menjadi hierarki tab, seperti yang ditunjukkan di sisi kiri contoh sebelumnya. Fitur ini membantu Anda memahami cara data dan pola akses didistribusikan di seluruh baris tabel. Dengan begitu, Anda juga dapat melihat perincian data untuk rentang row key tertentu dengan lebih cepat.

Jika row key Anda tidak terdiri dari beberapa nilai, Key Visualizer masih menampilkan tab di sisi kiri pemindaian, tetapi tab tersebut mungkin membagi row key Anda dengan cara yang tidak terduga, bukan menampilkan hierarki yang jelas.

Key bucket

Tabel Bigtable dapat memiliki triliunan baris, sehingga tidak selalu praktis untuk melaporkan metrik untuk setiap baris. Sebagai gantinya, Key Visualizer membagi semua row key menjadi 1.000 rentang yang berdekatan, dengan jumlah row key yang hampir sama di setiap rentang. Rentang ini dikenal sebagai key bucket.

Laporan Key Visualizer menampilkan sebagian besar metrik sebagai rata-rata di setiap key bucket, atau sebagai nilai maksimum dalam setiap key bucket. Untuk metrik Peringatan dan metrik Performa, Key Visualizer memberikan presisi yang lebih tinggi dengan melaporkan metrik untuk setiap row key atau untuk rentang kunci tertentu dalam key bucket.

Di balik layar, Key Visualizer menghasilkan data pemindaian baru setiap 15 menit. Agar dapat menggabungkan data dalam jangka waktu yang berdekatan, Key Visualizer mencoba mempertahankan bucket kunci yang sama dengan periode 15 menit sebelumnya. Kunci yang dihapus juga mungkin masih muncul sebagai batas bucket. Karena tabel berubah seiring waktu saat data ditambahkan dan dihapus, bucket kunci terkadang dihitung ulang agar seimbang.

Key Visualizer juga menghasilkan kumpulan bucket kunci baru setiap dua minggu, meskipun tabel tidak banyak berubah, hanya untuk menghapus batas bucket yang tersisa dari kunci yang dihapus. Akibatnya, meskipun tabel Anda stabil, Anda akan melihat bahwa bucket kunci Anda diperbarui sesekali.

Nilai gabungan

Selain peta panas, pemindaian Key Visualizer menyertakan nilai gabungan dalam diagram batang di sepanjang sisi bawah dan kanan peta panas. Saat Anda mengarahkan kursor ke nilai gabungan, Key Visualizer akan menandai area sempit di peta panas dan menampilkan informasi berikut:

  • Untuk sumbu x, Key Visualizer menampilkan nilai rata-rata untuk metrik saat ini, bersama dengan nilai total atau maksimum. Nilai ini muncul untuk semua rentang kunci yang terlihat dalam interval 15 menit.
  • Untuk sumbu y, Key Visualizer menampilkan nilai rata-rata untuk metrik saat ini di seluruh rentang waktu yang terlihat, yang dipecah menjadi rentang kunci.

Batasan

Key Visualizer memiliki batasan berikut:

Ukuran tabel minimum untuk pemindaian

Key Visualizer tersedia untuk tabel yang berisi setidaknya 1 GB data per cluster. Mungkin diperlukan waktu hingga satu jam setelah tabel mencapai ukuran tersebut agar pemindaian tersedia.

Rentang waktu

  • Minimum: Rentang waktu tersingkat yang dapat Anda lihat di Key Visualizer adalah 15 menit.
  • Maksimum: Rentang waktu terlama yang dapat Anda lihat adalah 14 hari.
  • Ukuran inkremen: Data Key Visualizer tersedia dalam inkremen 15 menit.

Durasi data

Data Key Visualizer tersedia selama 14 hari terakhir. Misalnya, jika Anda meluncurkan Key Visualizer pada 19 Desember pukul 12.45, waktu mulai paling awal yang dapat Anda pilih untuk rentang waktu adalah 5 Desember pukul 12.45.

Batas ini juga berarti bahwa jika Anda menandai atau membagikan URL untuk pemindaian Key Visualizer, URL tersebut memiliki masa aktif maksimum 14 hari.

Ketersediaan data awal

Saat Anda membuat tabel baru, data Key Visualizer tidak langsung tersedia. Proses latar belakang harus dijalankan terlebih dahulu untuk mengisi data yang diperlukan Key Visualizer. Proses ini biasanya memerlukan waktu beberapa hari, tetapi dapat memerlukan waktu hingga satu minggu.

Langkah berikutnya