Managed Service for Apache Spark 클러스터 배포는 일괄 처리, 쿼리, 스트리밍, 머신러닝에 오픈소스 데이터 도구를 활용할 수 있는 관리형 Spark 및 Hadoop 서비스입니다. 이 페이지에서는 Managed Service for Apache Spark의 Cloud de Confiance 버전과 Google Cloud 버전 간의 차이점을 설명합니다.
Managed Service for Apache Spark에 대한 자세한 내용은 Managed Service for Apache Spark 개요 및 나머지 Managed Service for Apache Spark 문서를 참고하세요.
주요 차이점
Managed Service for Apache Spark의 Cloud de Confiance 버전과 Google Cloud 버전에는 몇 가지 차이점이 있습니다. 몇 가지 주목할 만한 차이점은 다음과 같습니다.
- Cloud de Confiance에서는 Managed Service for Apache Spark 서버리스 (이전 명칭: Apache Spark용 서버리스)를 사용할 수 없습니다. Cloud de Confiance by S3NS
- Cloud de Confiance에서는 Managed Service for Apache Spark 클러스터 선택적 OSS 구성요소를 사용할 수 없습니다.
- Cloud de Confiance에서는 Managed Service for Apache Spark 클러스터 자동 확장 기능을 사용할 수 없습니다.
차이점의 자세한 목록은 이 섹션의 나머지 부분에서 확인하세요. Google Cloud에 이미 익숙하다면 특히 Cloud de Confiance에서 실행할 애플리케이션을 설계하기 전에 이러한 차이점을 신중하게 검토하는 것이 좋습니다. Cloud de Confiance 및 Google Cloud 간의 일반적인 차이점도 검토하는 것이 좋습니다.
현재 Cloud de Confiance에서 사용할 수 없는 특정 Managed Service for Apache Spark 기능을 사용하려면 Cloud de Confiance 지원팀에 문의하세요. Cloud de Confiance에 새로운 기능이 출시될 때 알림을 받으려면 출시 노트를 구독하세요. 달리 명시되지 않는 한 프리뷰 버전의 기능은 Cloud de Confiance에서 사용할 수 없습니다.
하드웨어 및 OS
| 머신 유형 | m3, c3-highcpu, c3-highmem, c3-standard, a3 머신 유형만 지원됩니다.
|
| GPU | NVIDIA H100 SXM GPU만 지원됩니다. |
| 보조 작업자 | 선점형 및 스팟 VM은 지원되지 않습니다. |
| 가변형 VM | 유연한 VM은 지원되지 않습니다. |
| 로컬 솔리드 스테이트 드라이브(SSD) | 로컬 SSD는 지원되지 않습니다. |
| 영구 부팅 디스크 | Hyperdisk 부팅 디스크만 지원됩니다. |
| 클러스터 이미지 버전 | 2.3 이상의 이미지 버전만 지원됩니다. |
| Kubernetes 클러스터 | Kubernetes 클러스터는 지원되지 않습니다. |
통합
| 선택적 OSS 구성요소 | Managed Service for Apache Spark 클러스터 선택적 OSS 구성요소와 이러한 구성요소와 관련된 클러스터 속성은 지원되지 않습니다. |
| 노트북 | Jupyter와 같은 노트북은 지원되지 않습니다. |
| Knowledge Catalog | 데이터 계보를 포함한 Knowledge Catalog는 지원되지 않습니다. |
| Pub/Sub 라이트 | Pub/Sub 라이트는 지원되지 않습니다. |
보안 및 액세스 제어
| CMEK | CMEK(고객 관리 암호화 키)는 지원되지만 워크플로 템플릿은 지원되지 않으므로 워크플로 템플릿 데이터와 함께 CMEK를 사용할 수는 없습니다. |
| 메모리 암호화 | 메모리 암호화는 지원되지 않습니다. |
| 개인 클러스터 인증 | 개인 클러스터 인증은 지원되지 않습니다. |
| 세분화된 IAM | 세분화된 IAM은 지원되지 않습니다. |
| 보안 멀티테넌시 클러스 | 서비스 계정 또는 Kerberos를 사용한 보안 멀티테넌시 클러스터는 지원되지 않습니다. |
네트워크
| 기본 네트워크 | 프로젝트에 기본 네트워크가 자동으로 생성되지 않습니다. 사용자는 프로젝트에서 VPC 네트워크를 만들어야 합니다. |
워크플로 및 도구
| 초기화 작업 | 초기화 작업은 지원되지 않습니다. | ||
| 자동 확장 | 자동 확장은 지원되지 않습니다. | ||
| 구성요소 게이트웨이 | Managed Service for Apache Spark 구성요소 게이트웨이는 지원되지 않습니다. | Managed Service for Apache Spark 구성요소 게이트웨이를 통해 클러스터 웹 인터페이스에 연결하는 것은 지원되지 않습니다. | Managed Service for Apache Spark 구성요소 게이트웨이에 대한 직원 액세스는 지원되지 않습니다. |
| 워크플로 조정 | Managed Service for Apache Airflow는 워크플로 템플릿 없이 지원되며 Managed Service for Apache Spark 워크플로 템플릿, Cloud Scheduler, Cloud Functions와 같은 다른 워크플로 도구는 지원되지 않습니다. | ||
| 커스텀 제약 조건 | 조직 정책의 커스텀 제약 조건은 지원되지 않습니다. | 맞춤 제약 조건이 있는 맞춤 조직 정책을 사용한 Fleet 관리는 지원되지 않습니다. | |
| 영구 기록 서버 | 영구 기록 서버(PHS)는 지원되지 않습니다. | ||
| 향상된 유연성 모드 | 향상된 유연성 모드 (EFM)는 지원되지 않습니다. | ||
| MCP 서버 | MCP 서버는 지원되지 않습니다. |
통계 및 모니터링 가능성
| Managed Service for Apache Spark 클러스터 측정항목 | dataproc.googleapis 측정항목은 사용할 수 있지만 Managed Service for Apache Spark 서버리스 및 커스텀 측정항목은 사용할 수 없습니다.
|
| 측정항목 대시보드 및 알림 | Managed Service for Apache Spark 측정항목 대시보드 및 측정항목 알림을 사용할 수 없습니다. |
관련 가이드
다음 정보는 Cloud de Confiance by S3NS에서 Managed Service for Apache Spark를 사용하고 설계하는 방식에도 영향을 미칠 수 있습니다. 이 가이드에는 문서, 보안 및 액세스 제어, 결제, 도구, 서비스 사용량을 포함하여 Cloud de Confiance에서 작업하는 방법에 대한 일반적인 정보가 포함되어 있습니다.
Cloud de Confiance 의 다른 서비스 및 기능과 Google Cloud의 이와 유사한 서비스 간의 차이점에 대한 자세한 내용은 제품 목록을 참조하세요.