Ringkasan image VM yang siap digunakan dengan HPC

Workload komputasi berperforma tinggi (HPC) yang dikaitkan secara erat sering kali menggunakan Message Passing Interface (MPI) untuk berkomunikasi antara proses dan instance Compute Engine. Namun, proses pembuatan image OS Anda sendiri yang disesuaikan untuk performa MPI optimal memerlukan keahlian sistem, Cloud de Confiance by S3NS pengetahuan, dan waktu tambahan untuk pemeliharaan. Untuk menyiapkan lingkungan yang dioptimalkan dengan cepat untuk workload HPC, gunakan image VM HPC.

Image VM HPC didasarkan pada Rocky Linux 8 atau Rocky Linux 9, dan dioptimalkan untuk workload HPC yang terkait erat. Image ini mencakup parameter penyesuaian jaringan dan kernel yang telah dikonfigurasi sebelumnya yang diperlukan untuk membuat instance komputasi yang mencapai performa MPI optimal di Cloud de Confiance by S3NS.

Untuk mendapatkan hasil terbaik, deploy image VM HPC pada jenis mesin dari seri mesin yang dioptimalkan untuk komputasi. Jenis mesin ini dirancang untuk aplikasi HPC yang terkait erat. Untuk menggunakan Cloud RDMA dengan H4D, Anda harus menggunakan image VM HPC Rocky 8 versi 20250917 atau yang lebih baru.

Anda dapat membuat instance VM HPC menggunakan salah satu metode yang tersedia untuk membuat instance komputasi. Anda juga dapat menggunakan pengelola workload Slurm SchedMD untuk men-deploy cluster HPC. Dukungan Slurm belum tersedia untuk image VM HPC berbasis Rocky Linux 9.

Manfaat

Image VM HPC memberikan manfaat berikut:

  1. Instance komputasi yang telah dikonfigurasi sebelumnya untuk workload HPC. Tidak perlu menyesuaikan performa secara manual, mengelola mulai ulang instance komputasi, atau mengikuti update Cloud de Confiance terbaru untuk workload HPC yang terkait erat.
  2. Pengoptimalan jaringan untuk workload yang dikaitkan secara erat. Pengoptimalan yang mengurangi latensi untuk pesan kecil disertakan. Pengoptimalan ini bermanfaat bagi aplikasi yang sangat bergantung pada komunikasi titik ke titik dan kolektif. Jika menggunakan seri mesin H4D, image HPC VM Rocky 8 berisi driver Cloud RDMA yang diperlukan.
  3. Pengoptimalan komputasi untuk workload HPC. Pengoptimalan yang mengurangi jitter sistem akan disertakan, yang membuat performa tinggi node tunggal lebih mudah diprediksi.
  4. Performa yang konsisten dan dapat direproduksi. Standardisasi image OS akan memberi Anda performa level aplikasi yang konsisten dan dapat direproduksi.
  5. Peningkatan kompatibilitas aplikasi. Perataan dengan persyaratan level node dalam spesifikasi platform HPC Intel yang memungkinkan interoperabilitas antar-sistem tingkat tinggi.

Fitur image VM HPC

Image VM HPC menawarkan beberapa fitur yang dirancang untuk mengoptimalkan performa untuk workload komputasi berperforma tinggi (HPC):

  • Update otomatis dinonaktifkan
  • Penyesuaian kolektif MPI
  • RPM yang telah terinstal sebelumnya

Update otomatis dinonaktifkan

Pembaruan otomatis dapat berdampak negatif pada performa beban kerja HPC. Nonaktifkan update otomatis untuk image VM HPC dengan menyetel entri metadata google_disable_automatic_updates ke TRUE selama pembuatan instance. Cara Anda menetapkan entri metadata ini selama pembuatan instance bergantung pada alat yang Anda gunakan untuk membuat instance.

Misalnya, saat Anda menggunakan perintah gcloud compute instances create untuk membuat instance komputasi, berikan argumen --metadata. Untuk mengetahui informasi selengkapnya, lihat artikel Tentang metadata VM.

Entri metadata google_disable_automatic_updates tersedia sebagai berikut:

  • Image Rocky 9 VM HPC: semua versi.
  • Image VM HPC Rocky 8: hanya tersedia di image yang dibuat pada atau setelah 12 Juli 2024. Tanggal build (diformat sebagai YYYYMMDD) digunakan sebagai nomor versi di akhir nama image. Misalnya, image VM HPC Rocky 8 yang dibuat pada 21 Juli 2025 memiliki nama hpc-rocky-linux-8-v20250721.

Jika Anda menonaktifkan update otomatis pada instance H4D, Anda harus menjalankan perintah dnf update secara rutin di instance untuk menjaga driver Cloud RDMA tetap terupdate.

Library Intel MPI

Google merekomendasikan agar Anda menggunakan skrip google_install_intelmpi untuk menginstal library message passing interface (MPI) sebelum menjalankan tugas MPI di Cloud de Confiance by S3NS. Untuk mengetahui informasi selengkapnya, lihat Menggunakan Intel MPI 2021.

RPM yang telah terinstal sebelumnya

Image VM HPC dilengkapi dengan paket RPM berikut yang telah diinstal sebelumnya:

  • daos-client
  • gcc-gfortran
  • gcc-toolset-12
  • Lmod
  • dkms
  • htop
  • hwloc
  • hwloc-devel
  • infiniband-diags
  • kernel-devel
  • kmod-idpf-irdma
  • libfabric
  • librdmacm-utils
  • libibverbs-utils
  • libXt
  • ltrace
  • nfs-utils
  • numactl
  • numactl-devel
  • papi
  • pciutils
  • pdsh
  • perf
  • perftest
  • rdma-core
  • redhat-lsb-core (Khusus HPC VM Rocky 8)
  • redhat-lsb-cxx (Khusus HPC VM Rocky 8)
  • rsh
  • screen
  • strace
  • wget
  • zsh
  • Grup paket "Development Tools"

Harga

Image VM HPC tersedia tanpa biaya tambahan. Karena image VM HPC berjalan di Compute Engine, Anda mungkin dikenai biaya untuk resource Compute Engine seperti vCPU, disk, dan memori. Untuk mempelajari lebih lanjut, lihat Harga Compute Engine.

Langkah berikutnya