Memasang block storage yang tahan lama ke VM TPU
VM TPU menyertakan boot disk 10 GB. Beberapa skenario memerlukan penyimpanan tambahan untuk pelatihan atau pra-pemrosesan. Tambahkan volume Google Cloud Hyperdisk atau Persistent Disk (PD) untuk memperluas kapasitas disk lokal.
Untuk performa tertinggi dan fitur lanjutan, gunakan Hyperdisk jika tersedia untuk versi TPU Anda. Jika tidak, gunakan Persistent Disk. Untuk mengetahui informasi selengkapnya tentang opsi block storage di Compute Engine, lihat Memilih jenis disk.
Dukungan TPU untuk Hyperdisk dan Persistent Disk
Tabel berikut menunjukkan jenis disk yang didukung untuk setiap versi TPU:
| Versi TPU | Jenis disk yang didukung | Disk maksimum per VM (termasuk boot disk) |
|---|---|---|
| TPU7x | Hyperdisk Balanced Hyperdisk ML |
128 |
| v6e | Hyperdisk Balanced Hyperdisk ML |
32 |
| v5p | Hyperdisk ML Persistent Disk Seimbang |
128 |
Mode akses
Konfigurasikan disk yang terpasang ke satu VM TPU (juga disebut slice TPU host tunggal), misalnya, ct6e-standard-4t, dalam mode baca-tulis (rw) atau hanya baca (ro).
Saat Anda memasang disk ke slice TPU multi-host, disk akan dipasang ke setiap VM dalam slice. Untuk mencegah beberapa VM TPU menulis ke disk secara bersamaan,
Anda harus mengonfigurasi semua disk yang terpasang ke slice TPU multi-host
sebagai hanya baca (ro). Disk hanya baca berguna untuk menyimpan set data untuk
diproses di slice TPU.
Prasyarat
Sebelum menggunakan prosedur ini, siapkan akun dan project Google Cloud . Untuk mengetahui informasi selengkapnya, lihat Menyiapkan lingkungan Cloud TPU.
Buat disk
Untuk membuat disk, gunakan perintah berikut:
gcloud compute disks create DISK_NAME \
--size DISK_SIZE \
--zone ZONE \
--type DISK_TYPE
Ganti placeholder berikut:
- DISK_NAME: Nama disk baru.
- DISK_SIZE: Ukuran disk baru. Nilainya harus berupa bilangan bulat yang diikuti dengan unit ukuran GB untuk gibibyte, atau TB untuk tebibyte. Jika Anda tidak menentukan unit ukuran, sistem akan mengasumsikan GB.
- ZONE: Nama zona tempat disk baru akan dibuat. Zona ini harus sama dengan zona tempat Anda membuat TPU.
- DISK_TYPE: Jenis disk.
Gunakan salah satu nilai:
hyperdisk-balanced,hyperdisk-ml, ataupd-balanced.
Untuk Hyperdisk, Anda dapat menentukan flag --access-mode
dengan salah satu nilai berikut:
- READ_WRITE_SINGLE: Akses baca-tulis dari satu instance (default).
- READ_ONLY_MANY: (Khusus Hyperdisk ML) Akses hanya baca serentak dari beberapa instance.
Untuk mengetahui informasi selengkapnya tentang cara membuat disk, lihat Membuat volume Hyperdisk baru dan Membuat volume Persistent Disk baru.
Memasang disk
Pasang volume disk ke VM atau slice TPU saat Anda membuatnya, atau pasang setelah pembuatan.
Memasang disk saat Anda membuat VM TPU
Saat Anda membuat VM TPU atau template instance, gunakan flag --disk untuk memasang volume disk.
Memasang disk saat membuat satu VM TPU
Contoh berikut menunjukkan cara memasang volume disk saat Anda membuat satu VM TPU:
gcloud compute instances create TPU_NAME \
--machine-type=MACHINE_TYPE \
--image-family=IMAGE_FAMILY \
--image-project=IMAGE_PROJECT \
--zone=ZONE \
--maintenance-policy=TERMINATE \
--disk=name=DISK_NAME,device-name=DEVICE_NAME,mode=MODE
Ganti placeholder berikut:
- TPU_NAME: Nama untuk VM TPU Anda.
- MACHINE_TYPE: Jenis mesin
untuk VM TPU (misalnya
ct6e-standard-8t). - IMAGE_FAMILY: Kelompok OS image
untuk VM TPU. Jika Anda ingin menginstal versi OS tertentu, gunakan flag
--image. Untuk mengetahui informasi selengkapnya tentang OS image, lihat OS image. - IMAGE_PROJECT: Project yang berisi image OS.
Untuk image TPU, nilainya adalah
ubuntu-os-accelerator-images. - ZONE: Zona untuk VM TPU.
- DEVICE_NAME: Nama perangkat yang akan digunakan untuk disk. Nama ini mengidentifikasi disk di OS.
- MODE: Mode untuk disk. Ini dapat berupa
rw(baca-tulis) atauro(hanya baca). Untuk mengetahui informasi selengkapnya, lihat Mode akses.
Memasang disk saat membuat slice TPU multi-host
Saat membuat slice TPU multi-host, Anda harus menentukan mode=read-only (khusus Hyperdisk ML dan Persistent Disk Seimbang). Untuk mengetahui informasi selengkapnya, lihat
Mode akses.
Untuk memasang disk di seluruh slice TPU multi-host, buat template instance dengan disk yang terpasang, buat kebijakan workload, lalu buat MIG:
Membuat template instance
gcloud compute instance-templates create INSTANCE_TEMPLATE_NAME --machine-type=MACHINE_TYPE \ --maintenance-policy=TERMINATE \ --image-family=IMAGE_FAMILY \ --image-project=IMAGE_PROJECT \ --disk=name=DISK_NAME,mode=MODEGanti placeholder berikut:
- INSTANCE_TEMPLATE_NAME: Nama untuk template instance Anda.
- MACHINE_TYPE: Jenis mesin
untuk VM TPU, misalnya,
ct6e-standard-8t. - IMAGE_FAMILY: Kelompok OS image
untuk VM TPU. Jika Anda ingin menginstal versi OS tertentu, gunakan flag
--image. Untuk mengetahui informasi selengkapnya tentang OS image, lihat OS image. - IMAGE_PROJECT: Project yang berisi image OS.
Untuk image TPU, nilainya adalah
ubuntu-os-accelerator-images. - DISK_NAME: Nama disk yang akan dipasang ke VM TPU.
- MODE: Mode untuk disk. Mode harus
ro(hanya baca) untuk slice TPU multi-host.
Membuat kebijakan workload
gcloud compute resource-policies create workload-policy WORKLOAD_POLICY_NAME \ --type=high-throughput \ --accelerator-topology=TOPOLOGY \ --region=WORKLOAD_POLICY_REGIONGanti placeholder berikut:
- WORKLOAD_POLICY_NAME: Nama kebijakan workload Anda.
- TOPOLOGY: Topologi VM TPU, misalnya,
4x4x8. Untuk mengetahui informasi selengkapnya tentang topologi untuk setiap versi TPU, lihat Arsitektur sistem. - WORKLOAD_POLICY_REGION: Region untuk kebijakan workload Anda. Gunakan region yang berisi zona MIG Anda.
Buat MIG:
gcloud compute instance-groups managed create MIG_NAME \ --project=PROJECT_ID \ --zone=ZONE \ --template=TEMPLATE_NAME \ --size=SIZE \ --workload-policy=WORKLOAD_POLICY_NAMEGanti placeholder berikut:
- MIG_NAME: Nama untuk MIG Anda.
- PROJECT_ID: Project ID.
- ZONE: Zona tempat Cloud TPU berada.
- TEMPLATE_NAME: Nama untuk template instance Anda.
- SIZE: Jumlah VM untuk slice TPU multi-host Anda.
- WORKLOAD_POLICY_NAME: Nama kebijakan workload Anda.
Memasang disk saat membuat MIG dengan beberapa slice TPU host tunggal
Jika membuat slice TPU host tunggal, Anda dapat menentukan mode=read-only
(khusus Hyperdisk ML dan Persistent Disk Seimbang) atau mode=read-write.
Untuk memasang penyimpanan persisten ke MIG dengan slice TPU host tunggal independen, konfigurasikan template instance untuk membuat disk baru bagi setiap instance menggunakan
flag --create-disk:
gcloud compute instance-templates create INSTANCE_TEMPLATE_NAME \
--machine-type=MACHINE_TYPE \
--maintenance-policy=TERMINATE \
--image-family=IMAGE_FAMILY \
--image-project=IMAGE_PROJECT \
--disk=name=DISK_NAME,mode=MODE
Ganti placeholder berikut:
- INSTANCE_TEMPLATE_NAME: Nama untuk template instance Anda.
- MACHINE_TYPE: Jenis mesin untuk VM TPU (misalnya,
ct6e-standard-8t). - IMAGE_FAMILY: Kelompok OS image untuk VM TPU.
- IMAGE_PROJECT: Project yang berisi image OS (
ubuntu-os-accelerator-images). - DISK_NAME: Nama dasar disk yang akan dibuat dan dipasang ke setiap VM TPU.
- DISK_SIZE: Ukuran disk dalam GB.
- DISK_TYPE: Jenis disk (misalnya,
pd-balanced,hyperdisk-balanced).
Kemudian, buat MIG seperti yang ditunjukkan di bagian sebelumnya,
dengan menetapkan --size ke jumlah VM TPU yang Anda pilih.
Memasang disk ke VM TPU yang ada
Untuk memasang disk ke VM TPU yang ada, gunakan perintah gcloud compute instances attach-disk.
gcloud compute instances attach-disk VM_NAME \
--zone=ZONE \
--disk=DISK_NAME \
--mode=MODE
Ganti placeholder berikut:
- VM_NAME: Nama VM TPU.
- ZONE: Zona tempat Cloud TPU berada.
- DISK_NAME: Nama disk yang akan dipasang ke VM TPU.
- MODE: Mode untuk disk. Untuk mengetahui informasi selengkapnya, lihat Mode akses.
Jika VM Anda nonaktif karena alasan apa pun, Anda mungkin perlu memasang disk setelah memulai ulang VM. Untuk mengetahui informasi tentang cara mengaktifkan disk agar otomatis dipasang saat VM dimulai ulang, lihat Mengonfigurasi pemasangan otomatis saat sistem dimulai ulang.
Untuk mengetahui informasi selengkapnya tentang cara menghapus disk secara otomatis, lihat Mengubah setelan hapus otomatis disk.
Memformat dan memasang disk
Jika Anda memasang disk kosong baru ke VM TPU, Anda harus memformat dan memasang disk tersebut sebelum dapat menggunakannya. Jika Anda memasang disk yang sudah berisi data, Anda harus memasangnya sebelum dapat menggunakannya.
Untuk mengetahui informasi selengkapnya tentang cara memformat dan memasang non-boot disk, lihat Memformat dan memasang non-boot disk di VM Linux.
Melepas disk
Untuk melepaskan disk dari VM TPU, jalankan perintah berikut:
gcloud compute instances detach-disk VM_NAME \
--zone=ZONE \
--disk=DISK_NAME
Ganti placeholder berikut:
- VM_NAME: Nama VM TPU.
- ZONE: Zona tempat Cloud TPU berada.
- DISK_NAME: Nama disk yang akan dilepas dari VM TPU.
Untuk mengetahui informasi selengkapnya tentang cara melepaskan disk, lihat Melepaskan disk.
Pembersihan
Hapus resource Cloud TPU dan Compute Engine setelah Anda selesai menggunakannya.
Putuskan koneksi dari Cloud TPU, jika Anda belum melakukannya:
exitHapus VM TPU Anda:
gcloud compute instances delete VM_NAME \ --zone=ZONEGanti placeholder berikut:
- VM_NAME: Nama VM TPU.
- ZONE: Zona tempat Cloud TPU berada.
Jika Anda membuat slice TPU multi-host menggunakan MIG, hapus grup instance:
gcloud compute instance-groups managed delete MIG_NAME \ --zone=ZONEGanti placeholder berikut:
- MIG_NAME: Nama MIG.
- ZONE: Zona tempat Cloud TPU berada.
Verifikasi penghapusan Cloud TPU. Penghapusan mungkin memerlukan waktu beberapa menit.
gcloud compute instances list --zone=ZONEPastikan disk otomatis dihapus saat VM TPU dihapus dengan mencantumkan semua disk di zona tempat Anda membuat disk:
gcloud compute disks list --filter="zone:( ZONE )"Ganti placeholder berikut:
- ZONE: Zona tempat Cloud TPU berada.
Jika disk tidak terhapus saat VM TPU dihapus, gunakan perintah berikut untuk menghapusnya:
gcloud compute disks delete DISK_NAME \ --zone=ZONEGanti placeholder berikut:
- DISK_NAME: Nama disk yang akan dihapus.
- ZONE: Zona tempat Cloud TPU berada.