Nilai konfigurasi otomatis untuk jenis mesin berperforma tinggi

Cloud Storage FUSE otomatis menerapkan nilai konfigurasi default yang dioptimalkan saat dijalankan pada jenis mesin Compute Engine berperforma tinggi, seperti seri A3, A4, dan TPU v6e. Setelan default ini membantu Anda mendapatkan throughput tinggi untuk workload yang berat tanpa penyesuaian manual. Nilai apa pun yang Anda tetapkan secara manual pada waktu pemasangan akan diprioritaskan.

Jenis mesin

Nilai konfigurasi diotomatiskan untuk jenis mesin Compute Engine berperforma tinggi berikut:

Jenis seri Jenis mesin
Seri mesin A2

a2-megagpu-16g

a2-ultragpu-8g
Seri mesin A3

a3-edgegpu-8g

a3-highgpu-8g

a3-megagpu-8g

a3-ultragpu-8g
Seri mesin A4

a4-highgpu-8g-lowmem
Seri mesin A4X
a4x-highgpu-4g
TPU v5e

ct5l-hightpu-8t

ct5lp-hightpu-8t
TPU v5p

ct5p-hightpu-4t

ct5p-hightpu-4t-tpu
TPU v6e (Trillium)

ct6e-standard-4t

ct6e-standard-4t-tpu

ct6e-standard-8t

ct6e-standard-8t-tpu
TPU 7x (Ironwood)
tpu7x-standard-4t

Nilai konfigurasi otomatis

Saat jenis mesin yang didukung terdeteksi, Cloud Storage FUSE akan otomatis menerapkan nilai konfigurasi berikut:

Kolom file konfigurasi Cloud Storage FUSE Opsi Cloud Storage FUSE CLI Nilai konfigurasi otomatis
metadata-cache:negative-ttl-secs --metadata-cache-negative-ttl-secs 0
metadata-cache:ttl-secs1 --metadata-cache-ttl-secs1

-1
metadata-cache:stat-cache-max-size-mb --stat-cache-max-size-mb 1024
implicit-dirs --implicit-dirs true
file-system:rename-dir-limit --rename-dir-limit 200000
write:global-max-blocks --write-global-max-blocks 1600

1Menetapkan konfigurasi ini ke -1 akan meningkatkan performa secara signifikan dengan selalu menyajikan file dari cache. Perhatikan bahwa konfigurasi ini mengabaikan pemeriksaan konsistensi, yang dapat menyebabkan penyajian data yang sudah tidak berlaku. Untuk mengetahui detail tentang cara mengelola konsistensi data, lihat Ringkasan caching di Cloud Storage FUSE.

Penyesuaian performa lebih lanjut

Saat Anda menggunakan jenis mesin Google Cloud berperforma tinggi, nilai konfigurasi yang dijelaskan di halaman ini akan diterapkan secara otomatis. Namun, Anda dapat menyesuaikan mesin lebih lanjut untuk performa optimal menggunakan metode berikut:

  • Gunakan Panduan praktik terbaik penyesuaian performa untuk meningkatkan Cloud Storage FUSE menggunakan fitur dan konfigurasi utama Cloud Storage FUSE untuk mencapai throughput maksimum dan performa optimal.

  • Jika Anda menjalankan workload pelatihan, inferensi, atau checkpointing dan cache Just in Time (JIT) di cluster Google Kubernetes Engine yang menggunakan GPU Cloud atau Cloud TPU untuk mengakses set data besar di Cloud Storage, Anda dapat menyederhanakan penyiapan dengan memanfaatkan file YAML yang telah dikonfigurasi sebelumnya untuk memasang bucket Cloud Storage langsung ke pod Anda secara lebih efisien. Untuk mengetahui informasi dan petunjuk selengkapnya tentang cara menggunakan file YAML GKE yang telah dikonfigurasi sebelumnya, lihat Menggunakan file YAML GKE yang telah dikonfigurasi sebelumnya untuk mengoptimalkan performa Cloud Storage FUSE.

  • Jika Anda menjalankan workload pelatihan, inferensi, atau checkpoint menggunakan Cloud Storage FUSE, Anda dapat menggunakan kolom profile atau opsi perintah --profile untuk otomatis menyesuaikan konfigurasi Cloud Storage FUSE tertentu guna mendapatkan performa optimal berdasarkan jenis workload tertentu. Untuk mengetahui informasi selengkapnya, lihat Konfigurasi berbasis profil untuk workload AI/ML.

Langkah berikutnya