Managed Service for Apache Spark クラスタのデプロイは、オープン ソースのデータツールを利用してバッチ処理、クエリ実行、ストリーミング、ML を行えるマネージド Spark / Hadoop サービスです。 このページでは、Managed Service for Apache Spark の Cloud de Confiance バージョンと Google Cloud バージョンの違いについて説明します。
Managed Service for Apache Spark の詳細については、 Managed Service for Apache Spark の概要と Managed Service for Apache Spark のドキュメントの残りの部分をご覧ください。
主な違い
Managed Service for Apache Spark の Cloud de Confiance バージョンと Google Cloud バージョンにはいくつかの違いがあります。 主な違いは次のとおりです。
- Managed Service for Apache Spark 向け Serverless（以前の Cloud de Confiance by S3NS Apache Spark 向け Serverless）は Cloud de Confianceでは使用できません。
- Managed Service for Apache Spark クラスタのオプションの OSS コンポーネントは では使用できません Cloud de Confiance.
- Managed Service for Apache Spark クラスタの自動スケーリングは Cloud de Confianceでは使用できません。
相違点の詳細な一覧については、このセクションの残りの部分をご覧ください。 Google Cloud をすでによくご存じの場合は、特に Cloud de Confianceで動作するアプリケーションを設計する前に、これらの違いをよくご確認ください。また、 と Google Cloudの一般的な違いを確認することもおすすめします。 Cloud de Confiance
で現在利用できない特定の Managed Service for Apache Spark 機能を使用する場合は、 Cloud de Confiance サポートにお問い合わせください。 Cloud de ConfianceCloud de Confianceで新機能がリリースされたときに通知を受け取るには、 リリースノートを購読してください。別段の記載がない限り、プレビュー版の機能は Cloud de Confianceでは使用できません。
ハードウェアと OS
| マシンタイプ | サポートされているのは、m3、c3-highcpu、c3-highmem、c3-standard、a3 のマシンタイプのみです。 |
| GPU | NVIDIA H100 SXM GPU のみがサポートされています。 |
| セカンダリ ワーカー | プリエンプティブル VM と Spot VM はサポートされていません。 |
| フレキシブル VM | フレキシブル VM はサポートされていません。 |
| ローカル ソリッド ステート ドライブ | ローカル SSD はサポートされていません。 |
| 永続ブートディスク | Hyperdisk ブートディスクのみがサポートされています。 |
| クラスタ イメージのバージョン | 2.3 以降のイメージ バージョンのみがサポートされています。 |
| Kubernetes クラスタ | Kubernetes クラスタはサポートされていません。 |
統合
| オプションの OSS コンポーネント | Managed Service for Apache Spark クラスタのオプションの OSS コンポーネントと、これらのコンポーネントに関連するクラスタ プロパティは対象外です。 |
| ノートブック | Jupyter などのノートブックはサポートされていません。 |
| Knowledge Catalog | データリネージを含む Knowledge Catalog は対象外です。 |
| Pub/Sub Lite Lite | Pub/Sub Lite Lite はサポートされていません。 |
セキュリティとアクセス制御
| CMEK | CMEK（顧客管理の暗号鍵）はサポートされていますが、ワークフロー テンプレートはサポートされていないため、ワークフロー テンプレートのデータで CMEK を使用することはできません。 |
| メモリ暗号化 | メモリの暗号化はサポートされていません。 |
| 個人用クラスタ認証 | 個人用クラスタ認証はサポートされていません。 |
| Granular IAM | きめ細かい IAM はサポートされていません。 |
| 安全なマルチテナンシー クラスタ | サービス アカウントまたは Kerberos を使用した安全なマルチテナンシー クラスタはサポートされていません。 |
ネットワーク
| デフォルトのネットワーク | デフォルト ネットワークはプロジェクトに自動的に作成されません。ユーザーがプロジェクトに VPC ネットワークを作成する必要があります。 |
ワークフローとツール
| 初期化アクション | 初期化アクションはサポートされていません。 | ||
| 自動スケーリング | 自動スケーリングは対象外です。 | ||
| コンポーネント ゲートウェイ | Managed Service for Apache Spark コンポーネント ゲートウェイはサポートされていません。 | Managed Service for Apache Spark コンポーネント ゲートウェイを介した クラスタ ウェブ インターフェースへの接続はサポートされていません。 | Managed Service for Apache Spark コンポーネント ゲートウェイへの従業員のアクセスは対象外です。 |
| ワークフロー オーケストレーション | Managed Service for Apache Airflow はワークフロー テンプレートなしでサポートされています。Managed Service for Apache Spark ワークフロー テンプレート、Cloud Scheduler、Cloud Functions などの他のワークフロー ツールは対象外です。 | ||
| カスタム制約 | 組織のポリシーのカスタム制約は対象外です。 | カスタム制約を含むカスタム組織ポリシーを使用したフリート管理は対象外です。 | |
| 永続的履歴サーバー | 永続履歴サーバー（PHS）はサポートされていません。 | ||
| 高度な柔軟性モード | 高度な柔軟性モード（EFM）は対象外です。 | ||
| MCP サーバー | MCP サーバーはサポートされていません。 |
分析情報とオブザーバビリティ
| Managed Service for Apache Spark クラスタの指標 | dataproc.googleapis 指標は使用できますが、Managed Service for Apache Spark 向け Serverless とカスタム指標は使用できません。
|
| 指標のダッシュボードとアラート | Managed Service for Apache Spark の指標のダッシュボードと指標アラートは使用できません。 |
関連ガイド
以下の情報は、 での Managed Service for Apache Spark の使用方法と設計方法にも影響する可能性があります Cloud de Confiance by S3NS。これらのガイドには、 Cloud de Confiance ドキュメント、セキュリティとアクセス制御、課金、ツール、サービスの使用状況など、での作業に関する一般的な情報が含まれています。
Cloud de Confiance の他のサービスと機能、および Google Cloud の同等のサービスと機能との違いについては、プロダクト リストをご覧ください。