Die Bereitstellung von Managed Service for Apache Spark-Clustern ist ein verwalteter Spark- und Hadoop-Dienst, mit dem Sie Open- Source-Datentools für Batchverarbeitung, Abfragen, Streaming und maschinelles Lernen nutzen können. Auf dieser Seite werden die Unterschiede zwischen den Cloud de Confiance und Google Cloud-Versionen von Managed Service for Apache Spark beschrieben.
Weitere Informationen zu Managed Service for Apache Spark finden Sie in der Übersicht zu Managed Service for Apache Spark und im Rest der Dokumentation zu Managed Service for Apache Spark.
Wichtige Unterschiede
Es gibt einige Unterschiede zwischen der Cloud de Confiance Version von Managed Service for Apache Spark und der Google Cloud-Version. Einige wichtige Unterschiede sind folgende:
- Managed Service for Apache Spark serverless (ehemals Cloud de Confiance by S3NS for Serverless for Apache Spark) ist in Cloud de Confiancenicht verfügbar.
- Optionale OSS-Komponenten für Managed Service for Apache Spark-Cluster sind in nicht verfügbar Cloud de Confiance.
- Autoscaling für Managed Service for Apache Spark-Cluster ist in Cloud de Confiancenicht verfügbar.
Eine detaillierte Liste der Unterschiede finden Sie im Rest dieses Abschnitts. Wenn Sie bereits mit Google Cloud vertraut sind, empfehlen wir Ihnen, sich diese Unterschiede genau anzusehen, insbesondere bevor Sie eine Anwendung für die Ausführung in Cloud de Confianceentwickeln. Wir empfehlen außerdem, sich die allgemeinen Unterschiede zwischen Cloud de Confiance und Google Cloud anzusehen.
Wenn Sie eine bestimmte Managed Service for Apache Spark-Funktion verwenden möchten, die derzeit nicht inverfügbar ist Cloud de Confiance, wenden Sie sich an den Cloud de Confiance Support. Wenn Sie benachrichtigt werden möchten, wenn neue Funktionen in Cloud de Confianceeingeführt werden, abonnieren Sie die Versionshinweise. Sofern nicht anders angegeben, sind Funktionen, die sich in der Vorschau befinden, in Cloud de Confiancenicht verfügbar.
Hardware und Betriebssystem
| Maschinentypen | Nur die Maschinentypen m3, c3-highcpu, c3-highmem, c3-standard, und a3 werden unterstützt.
|
| GPUs | Nur NVIDIA H100 SXM-GPUs werden unterstützt. |
| Sekundäre Worker | VMs auf Abruf und Spot-VMs werden nicht unterstützt. |
| Flexible VMs | Flexible VMs werden nicht unterstützt. |
| Lokaler SSD-Speicher | Lokale SSDs werden nicht unterstützt. |
| Nichtflüchtige Bootlaufwerke | Nur Hyperdisk-Bootlaufwerke werden unterstützt. |
| Cluster-Image-Versionen | Nur Image-Versionen ab 2.3 werden unterstützt. |
| Kubernetes-Cluster | Kubernetes-Cluster werden nicht unterstützt. |
Integrationen
| Optionale OSS-Komponenten | Optionale OSS-Komponenten für Managed Service for Apache Spark-Cluster und Clustereigenschaften, die sich auf diese Komponenten beziehen, werden nicht unterstützt. |
| Notebooks | Notebooks wie Jupyter werden nicht unterstützt. |
| Knowledge Catalog | Knowledge Catalog, einschließlich Datenherkunft, wird nicht unterstützt. |
| Pub/Sub Lite Lite | Pub/Sub Lite Lite wird nicht unterstützt. |
Sicherheit und Zugriffssteuerung
| CMEK | CMEK (kundenverwaltete Verschlüsselungsschlüssel) wird unterstützt. Sie können CMEK jedoch nicht mit Workflowvorlagendaten verwenden, da Workflowvorlagen nicht unterstützt werden. |
| Arbeitsspeicherverschlüsselung | Die Arbeitsspeicherverschlüsselung wird nicht unterstützt. |
| Persönliche Clusterauthentifizierung | Die persönliche Clusterauthentifizierung wird nicht unterstützt. |
| Detaillierte IAM-Steuerung | Die detaillierte IAM-Steuerung wird nicht unterstützt. |
| Sichere Cluster mit mehreren Mandanten | Sichere Cluster mit mehreren Mandanten mit Dienstkonten oder Kerberos werden nicht unterstützt. |
Netzwerk
| Standardnetzwerk | In einem Projekt wird nicht automatisch ein Standardnetzwerk erstellt. Nutzer müssen ein VPC-Netzwerk in einem Projekt erstellen. |
Workflows und Tools
| Initialisierungsaktionen | Initialisierungsaktionen werden nicht unterstützt. | ||
| Autoscaling | Autoscaling wird nicht unterstützt. | ||
| Komponentengateway | Das Managed Service for Apache Spark-Komponentengateway wird nicht unterstützt. | Die Verbindung über das Managed Service for Apache Spark-Komponentengateway zu Web-Benutzeroberflächen von Clustern wird nicht unterstützt. | Der Zugriff von Mitarbeitern auf das Managed Service for Apache Spark-Komponentengateway wird nicht unterstützt. |
| Workflow-Orchestrierung | Managed Service for Apache Airflow wird ohne Workflowvorlagen unterstützt. Andere Workflow-Tools wie Managed Service for Apache Spark-Workflowvorlagen, Cloud Scheduler und Cloud Functions werden nicht unterstützt. | ||
| Benutzerdefinierte Einschränkungen | Benutzerdefinierte Einschränkungen in Organisationsrichtlinien werden nicht unterstützt. | Die Flottenverwaltung mit benutzerdefinierten Organisationsrichtlinien mit benutzerdefinierten Einschränkungen wird nicht unterstützt. | |
| Persistent History Server | Persistent History Server (PHS) wird nicht unterstützt. | ||
| Modus für verbesserte Flexibilität | Der Modus für verbesserte Flexibilität (Enhanced Flexibility Mode, EFM) wird nicht unterstützt. | ||
| MCP-Server | Der MCP-Server wird nicht unterstützt. |
Statistiken und Beobachtbarkeit
| Messwerte für Managed Service for Apache Spark-Cluster | dataproc.googleapis-Messwerte sind verfügbar, aber serverlose und benutzerdefinierte Messwerte für Managed Service for Apache Spark sind nicht verfügbar.
|
| Messwert-Dashboards und -Benachrichtigungen | Messwert-Dashboards und -Benachrichtigungen für Managed Service for Apache Spark sind nicht verfügbar. |
Verwandte Leitfäden
Die folgenden Informationen können sich auch darauf auswirken, wie Sie Managed Service for Apache Spark in Cloud de Confiance by S3NSverwenden und dafür entwickeln. Diese Leitfäden enthalten allgemeine Informationen zur Arbeit in Cloud de Confiance, einschließlich Dokumentation, Sicherheit und Zugriffssteuerung, Abrechnung, Tools und Dienstnutzung.
Weitere Informationen zu anderen Diensten und Funktionen in Cloud de Confiance und zu den Unterschieden zu den entsprechenden Google Cloud-Produkten finden Sie in der Produktliste.