Deployment cluster Managed Service untuk Apache Spark adalah layanan Spark dan Hadoop terkelola yang membantu Anda memanfaatkan alat data open source untuk batch processing, pembuatan kueri, streaming, dan machine learning. Halaman ini menjelaskan perbedaan antara Cloud de Confiance dan versi Google Cloud dari Managed Service untuk Apache Spark.
Untuk informasi lebih mendetail tentang Managed Service untuk Apache Spark, lihat Ringkasan Managed Service untuk Apache Spark dan bagian lainnya dari dokumentasi Managed Service untuk Apache Spark.
Perbedaan utama
Ada beberapa perbedaan antara versi Cloud de Confiance Managed Service untuk Apache Spark dan versi Google Cloud. Beberapa perbedaan penting mencakup hal-hal berikut:
- Managed Service untuk Apache Spark serverless (sebelumnya dikenal sebagai Cloud de Confiance by S3NS untuk Serverless untuk Apache Spark) tidak tersedia di Cloud de Confiance.
- Komponen OSS opsional cluster Managed Service untuk Apache Spark tidak tersedia di Cloud de Confiance.
- Penskalaan otomatis cluster Managed Service untuk Apache Spark tidak tersedia di Cloud de Confiance.
Daftar perbedaan yang lebih mendetail tersedia di bagian ini. Jika Anda sudah memahami Google Cloud, sebaiknya tinjau perbedaan ini dengan cermat, terutama sebelum mendesain aplikasi untuk dijalankan di Cloud de Confiance. Sebaiknya Anda juga meninjau perbedaan umum antara Cloud de Confiance dan Google Cloud.
Jika Anda ingin menggunakan fitur Managed Service untuk Apache Spark tertentu yang saat ini tidak tersedia di Cloud de Confiance, hubungi Cloud de Confiance dukungan. Agar mendapatkan notifikasi saat fitur baru diluncurkan di Cloud de Confiance, berlanggananlah ke catatan rilis. Kecuali jika dinyatakan lain, fitur yang dalam pratinjau tidak tersedia di Cloud de Confiance.
Hardware dan OS
| Jenis mesin | Hanya jenis mesin m3, c3-highcpu, c3-highmem, c3-standard, dan a3 yang didukung.
|
| GPU | Hanya GPU NVIDIA H100 SXM yang didukung. |
| Pekerja sekunder | Preemptible VM dan spot VM tidak didukung. |
| VM Fleksibel | VM Fleksibel tidak didukung. |
| Solid State Drive lokal | SSD lokal tidak didukung. |
| Persistent boot disk | Hanya hyperdisk boot disk yang didukung. |
| Versi image cluster | Hanya versi image 2.3+ yang didukung. |
| Cluster Kubernetes | Cluster Kubernetes tidak didukung. |
Integrasi
| Komponen OSS opsional | Komponen OSS opsional cluster Managed Service untuk Apache Spark, dan properti cluster yang terkait dengan komponen ini, tidak didukung. |
| Notebooks | Notebooks, seperti Jupyter, tidak didukung. |
| Knowledge Catalog | Knowledge Catalog, termasuk data lineage, tidak didukung. |
| Pub/Sub Lite Lite | Pub/Sub Lite Lite tidak didukung. |
Kontrol keamanan dan akses
| CMEK | CMEK (kunci enkripsi yang dikelola pelanggan) didukung, tetapi Anda tidak dapat menggunakan CMEK dengan data template alur kerja, karena template alur kerja tidak didukung. |
| Enkripsi memori | Enkripsi memori tidak didukung. |
| Autentikasi cluster pribadi | Autentikasi cluster pribadi tidak didukung. |
| IAM terperinci | IAM terperinci tidak didukung. |
| Cluster multi-tenancy yang aman | Cluster multi-tenancy yang aman menggunakan akun layanan atau Kerberos tidak didukung. |
Jaringan
| Jaringan default | Jaringan default tidak otomatis dibuat dalam project. Pengguna harus membuat jaringan VPC dalam project. |
Alur kerja dan alat
| Tindakan inisialisasi | Tindakan inisialisasi tidak didukung. | ||
| Penskalaan otomatis | Penskalaan otomatis tidak didukung. | ||
| Gateway Komponen | Gateway Komponen Managed Service untuk Apache Spark tidak didukung. | Menghubungkan melalui Gateway Komponen Managed Service untuk Apache Spark ke cluster web interfaces tidak didukung. | Akses tenaga kerja ke Gateway Komponen Managed Service untuk Apache Spark tidak didukung. |
| Orkestrasi alur kerja | Managed Service untuk Apache Airflow didukung tanpa template alur kerja, dan alat alur kerja lainnya, seperti template alur kerja Managed Service untuk Apache Spark, Cloud Scheduler, dan Cloud Functions, tidak didukung. | ||
| Batasan kustom | Batasan kustom dalam kebijakan organisasi tidak didukung. | Pengelolaan fleet dengan kebijakan organisasi kustom dengan batasan kustom tidak didukung. | |
| Persistent History Server | Persistent History Server (PHS) tidak didukung. | ||
| Mode Fleksibilitas yang Ditingkatkan | Mode Fleksibilitas yang Ditingkatkan (EFM) tidak didukung. | ||
| Server MCP | Server MCP tidak didukung. |
Insight dan kemampuan observasi
| Metrik cluster Managed Service untuk Apache Spark | Metrik dataproc.googleapis tersedia, tetapi metrik kustom dan serverless Managed Service untuk Apache Spark tidak tersedia.
|
| Dasbor dan pemberitahuan metrik | Dasbor metrik dan pemberitahuan metrik Managed Service untuk Apache Spark tidak tersedia. |
Panduan terkait
Informasi berikut juga dapat memengaruhi cara Anda menggunakan dan mendesain Managed Service untuk Apache Spark di Cloud de Confiance by S3NS. Panduan ini mencakup informasi umum tentang cara bekerja di Cloud de Confiance, termasuk dokumentasi, kontrol akses dan keamanan, penagihan, alat, serta penggunaan layanan.
Untuk mengetahui detail tentang layanan dan fitur lainnya di Cloud de Confiance dan perbedaannya dengan layanan dan fitur Google Cloud yang setara, lihat daftar produk.