Identity and Access Management (IAM) consente di controllare l'accesso di utenti e gruppi alle risorse del progetto. Questo documento si concentra sulle autorizzazioni IAM relative a Managed Service for Apache Spark e sui ruoli IAM che concedono queste autorizzazioni.
Autorizzazioni di Managed Service for Apache Spark sui cluster
Le autorizzazioni di Managed Service for Apache Spark consentono agli utenti, inclusi i service account, di eseguire azioni su cluster, job, operazioni e template di workflow di Managed Service for Apache Spark. Ad esempio, l'autorizzazione dataproc.clusters.create consente a un utente di creare cluster Managed Service for Apache Spark in un progetto.
In genere, non concedi autorizzazioni, ma ruoli, che includono una o più autorizzazioni.
Le tabelle seguenti elencano le autorizzazioni necessarie per chiamare le API (metodi) di Managed Service for Apache Spark. Le tabelle sono organizzate in base alle API associate a ciascuna risorsa di Managed Service for Apache Spark (cluster, job, operazioni e template di workflow).
Ambito delle autorizzazioni: l'ambito delle autorizzazioni di Managed Service for Apache Spark elencate nelle tabelle seguenti è il progetto Cloud de Confiance by S3NScontenitore (ambito cloud-platform). Consulta
Autorizzazioni dei service account.
Esempi:
dataproc.clusters.createconsente la creazione di cluster Managed Service for Apache Spark nel progetto di contenimentodataproc.jobs.createconsente l'invio di job Managed Service for Apache Spark ai cluster Managed Service for Apache Spark nel progetto di contenimentodataproc.clusters.listconsente di elencare i dettagli dei cluster Managed Service for Apache Spark nel progetto di contenimento
Autorizzazioni richieste per i metodi dei cluster
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.clusters.create 1, 2 | dataproc.clusters.create |
| projects.regions.clusters.get | dataproc.clusters.get |
| projects.regions.clusters.list | dataproc.clusters.list |
| projects.regions.clusters.patch 1, 2, 3 | dataproc.clusters.update |
| projects.regions.clusters.delete 1 | dataproc.clusters.delete |
| projects.regions.clusters.start | dataproc.clusters.start |
| projects.regions.clusters.stop | dataproc.clusters.stop |
| projects.regions.clusters.getIamPolicy | dataproc.clusters.getIamPolicy |
| projects.regions.clusters.setIamPolicy | dataproc.clusters.setIamPolicy |
Note:
- L'autorizzazione
dataproc.operations.getè necessaria anche per ricevere aggiornamenti di stato da Google Cloud CLI. - Per ottenere il risultato dell'operazione da Google Cloud CLI è necessaria anche l'autorizzazione
dataproc.clusters.get. - Per attivare una policy di scalabilità automatica su un cluster è necessaria anche l'autorizzazione
dataproc.autoscalingPolicies.use.
Autorizzazioni richieste per i metodi dei job
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.jobs.submit 1, 2 | dataproc.jobs.create dataproc.clusters.use |
| projects.regions.jobs.get | dataproc.jobs.get |
| projects.regions.jobs.list | dataproc.jobs.list |
| projects.regions.jobs.cancel 1 | dataproc.jobs.cancel |
| projects.regions.jobs.patch 1 | dataproc.jobs.update |
| projects.regions.jobs.delete 1 | dataproc.jobs.delete |
| projects.regions.jobs.getIamPolicy | dataproc.jobs.getIamPolicy |
| projects.regions.jobs.setIamPolicy | dataproc.jobs.setIamPolicy |
Note:
Google Cloud CLI richiede anche l'autorizzazione
dataproc.jobs.getper i comandijobs submit,jobs wait,jobs update,jobs deleteejobs kill.gcloud CLI richiede anche l'autorizzazione
dataproc.clusters.getper inviare i job. Per un esempio di impostazione delle autorizzazioni necessarie per consentire a un utente di eseguiregcloud dataproc jobs submitsu un cluster utilizzando IAM granulare di Managed Service for Apache Spark (consulta Invio di job con IAM granulare).
Autorizzazioni richieste per i metodi delle operazioni
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.operations.get | dataproc.operations.get |
| projects.regions.operations.list | dataproc.operations.list |
| projects.regions.operations.cancel | dataproc.operations.cancel |
| projects.regions.operations.delete | dataproc.operations.delete |
| projects.regions.operations.getIamPolicy | dataproc.operations.getIamPolicy |
| projects.regions.operations.setIamPolicy | dataproc.operations.setIamPolicy |
Autorizzazioni richieste per i metodi dei template di workflow
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.workflowTemplates.instantiate | dataproc.workflowTemplates.instantiate |
| projects.regions.workflowTemplates.instantiateInline | dataproc.workflowTemplates.instantiateInline |
| projects.regions.workflowTemplates.create | dataproc.workflowTemplates.create |
| projects.regions.workflowTemplates.get | dataproc.workflowTemplates.get |
| projects.regions.workflowTemplates.list | dataproc.workflowTemplates.list |
| projects.regions.workflowTemplates.update | dataproc.workflowTemplates.update |
| projects.regions.workflowTemplates.delete | dataproc.workflowTemplates.delete |
| projects.regions.workflowTemplates.getIamPolicy | dataproc.workflowTemplates.getIamPolicy |
| projects.regions.workflowTemplates.setIamPolicy | dataproc.workflowTemplates.setIamPolicy |
Note:
Le autorizzazioni per i modelli di workflow sono indipendenti dalle autorizzazioni per i cluster e i job. Un utente senza autorizzazioni
create clusterosubmit jobpuò creare e creare un'istanza di un modello di workflow.Google Cloud CLI richiede inoltre l'autorizzazione
dataproc.operations.getper eseguire il polling del completamento del workflow.Per annullare un workflow in esecuzione è necessaria l'autorizzazione
dataproc.operations.cancel.
Autorizzazioni richieste per i metodi delle policy di scalabilità automatica
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.autoscalingPolicies.create | dataproc.autoscalingPolicies.create |
| projects.regions.autoscalingPolicies.get | dataproc.autoscalingPolicies.get |
| projects.regions.autoscalingPolicies.list | dataproc.autoscalingPolicies.list |
| projects.regions.autoscalingPolicies.update | dataproc.autoscalingPolicies.update |
| projects.regions.autoscalingPolicies.delete | dataproc.autoscalingPolicies.delete |
| projects.regions.autoscalingPolicies.getIamPolicy | dataproc.autoscalingPolicies.getIamPolicy |
| projects.regions.autoscalingPolicies.setIamPolicy | dataproc.autoscalingPolicies.setIamPolicy |
Note:
- Per attivare una policy di scalabilità automatica su un cluster con una richiesta del metodo
clusters.patch, è necessaria l'autorizzazionedataproc.autoscalingPolicies.use.
Autorizzazioni richieste per i metodi dei gruppi di nodi
| Metodo | Autorizzazioni obbligatorie |
|---|---|
| projects.regions.nodeGroups.create | dataproc.nodeGroups.create |
| projects.regions.nodeGroups.get | dataproc.nodeGroups.get |
| projects.regions.nodeGroups.resize | dataproc.nodeGroups.update |
Ruoli di Managed Service for Apache Spark
I ruoli IAM di Managed Service for Apache Spark sono un bundle di una o più autorizzazioni.
Concedi i ruoli a utenti o gruppi per consentire loro di eseguire azioni sulle risorse di Managed Service for Apache Spark in un progetto. Ad esempio, il ruolo Visualizzatore Managed Service for Apache Spark contiene le autorizzazioni get e list, che consentono a un utente di ottenere ed elencare i cluster, i job e le operazioni di Managed Service for Apache Spark in un progetto.
La tabella seguente elenca i ruoli che contengono le autorizzazioni necessarie per creare e gestire i cluster Managed Service for Apache Spark.
| Concedi ruolo a | Ruoli |
|---|---|
| Utente | Concedi agli utenti i seguenti ruoli:
|
| Service account | Concedi al service account VM di Managed Service for Apache Spark il ruolo Dataproc Worker. |
Tieni presente quanto segue:
Potresti dover concedere al service account della VM di Managed Service for Apache Spark altri ruoli predefiniti o personalizzati che contengono le autorizzazioni necessarie per altre operazioni, come la lettura e la scrittura di dati da e verso Cloud Storage, BigQuery, Cloud Logging e altre risorse Cloud de Confiance by S3NS .
In alcuni progetti, al service account VM di Managed Service for Apache Spark potrebbe essere stato concesso automaticamente il ruolo Editor del progetto, che include le autorizzazioni del ruolo Dataproc Worker e autorizzazioni aggiuntive non necessarie per le operazioni del piano dati di Managed Service for Apache Spark. Per seguire il principio di sicurezza del privilegio minimo, sostituisci il ruolo Editor con il ruolo Dataproc Worker (consulta Visualizza i ruoli account di servizio delle VM).
Devi concedere ruoli?
A seconda della policy dell'organizzazione, potrebbe essere già stato concesso un ruolo obbligatorio.
Controlla i ruoli concessi agli utenti
Per verificare se a un utente è stato concesso un ruolo, segui le istruzioni riportate in Gestisci l'accesso a progetti, cartelle e organizzazioni > Visualizza l'accesso corrente.
Controlla i ruoli concessi ai service account
Per verificare se a un account di servizio è stato concesso un ruolo, consulta Visualizza e gestisci i ruoli dei account di servizio IAM.
Controlla i ruoli concessi a un account di servizio
Per verificare se a un utente è stato concesso un ruolo su un account di servizio, segui le istruzioni riportate in Gestisci l'accesso ai service account > Visualizza l'accesso corrente.
Cerca i ruoli e le autorizzazioni di Managed Service for Apache Spark
Puoi utilizzare la sezione seguente per cercare i ruoli e le autorizzazioni di Managed Service for Apache Spark.
| Role | Permissions |
|---|---|
Dataproc Administrator( Full control of Dataproc resources. |
|
Dataproc Editor( Provides the permissions necessary for viewing the resources required to manage Managed Service for Apache Spark, including machine types, networks, projects, and zones. Lowest-level resources where you can grant this role:
|
|
Dataproc Viewer( Provides read-only access to Managed Service for Apache Spark resources. Lowest-level resources where you can grant this role:
|
|
Dataproc Hub Agent( Allows management of Dataproc resources. Intended for service accounts running Dataproc Hub instances. |
|
Dataproc Serverless Editor( Permissions needed to run serverless sessions and batches as a user |
|
Dataproc Serverless Node.( Node access to Dataproc Serverless sessions and batches. Intended for service accounts. |
|
Dataproc Serverless Viewer( Permissions needed to view serverless sessions and batches |
|
Dataproc Worker( Provides worker access to Managed Service for Apache Spark resources. Intended for service accounts. |
|
Service agent roles
Service agent roles should only be granted to service agents.
| Role | Permissions |
|---|---|
Dataproc Service Agent( Gives Dataproc Service Account access to service accounts, compute resources, storage resources, and kubernetes resources. Includes access to service accounts. |
|
Note:
- Le autorizzazioni
computesono necessarie o consigliate per creare e visualizzare i cluster Managed Service for Apache Spark quando utilizzi la console Cloud de Confiance o Google Cloud CLI. - Per consentire a un utente di caricare file, concedi il ruolo
Storage Object Creator. Per consentire a un utente di visualizzare l'output del job, concedi il ruoloStorage Object Viewer. - Un utente deve disporre dell'autorizzazione
monitoring.timeSeries.listper visualizzare i grafici nella console Cloud de Confiance →Managed Service for Apache Spark→Dettagli cluster→scheda Panoramica. - Un utente deve disporre dell'autorizzazione
compute.instances.listper visualizzare lo stato dell'istanza e il menu SSH dell'istanza master nella consoleCloud de Confiance →Managed Service for Apache Spark→Dettagli cluster scheda Istanze VM. Per informazioni sui ruoli di Compute Engine, consulta Compute Engine→Ruoli IAM disponibili. - Per creare un cluster con un account di servizio specificato dall'utente, il account di servizio specificato deve disporre di tutte le autorizzazioni concesse dal ruolo
Dataproc Worker, che includono l'accesso ai bucket di gestione temporanea e temporanei di Managed Service for Apache Spark. A seconda delle funzionalità configurate, potrebbero essere richiesti ruoli aggiuntivi. Per saperne di più, consulta Crea un cluster con un service account VM personalizzato.
Ruoli del progetto
Puoi anche impostare le autorizzazioni a livello di progetto utilizzando i ruoli IAM Project. La tabella seguente elenca le autorizzazioni associate ai ruoli IAM del progetto:
| Ruolo progetto | Autorizzazioni |
|---|---|
| Project Viewer | Tutte le autorizzazioni di progetto per le azioni di sola lettura che preservano lo stato (get, list) |
| Editor progetto | Tutte le autorizzazioni di Project Viewer, più tutte le autorizzazioni di progetto per le azioni che modificano lo stato (creazione, eliminazione, aggiornamento, utilizzo, annullamento, arresto, avvio) |
| Proprietario progetto | Tutte le autorizzazioni di Project Editor, oltre alle autorizzazioni per gestire il controllo dell'accesso per il progetto (get/set IamPolicy) e per configurare la fatturazione del progetto |
Riepilogo dei ruoli IAM e delle operazioni di Managed Service for Apache Spark
La tabella seguente elenca le operazioni di Managed Service for Apache Spark associate ai ruoli di progetto e di Managed Service for Apache Spark.
| Operazione | Editor progetto | Project Viewer | Amministratore di Managed Service for Apache Spark | Editor di Managed Service for Apache Spark | Visualizzatore Managed Service for Apache Spark |
|---|---|---|---|---|---|
| Ottieni/Imposta le autorizzazioni IAM di Managed Service for Apache Spark | No | No | Sì | No | No |
| Crea cluster | Sì | No | Sì | Sì | No |
| Elenca cluster | Sì | Sì | Sì | Sì | Sì |
| Recupero dei dettagli del cluster | Sì | Sì | Sì 1, 2 | Sì 1, 2 | Sì 1, 2 |
| Aggiorna cluster | Sì | No | Sì | Sì | No |
| Elimina cluster | Sì | No | Sì | Sì | No |
| Avvia/Arresta cluster | Sì | No | Sì | Sì | No |
| Invia il job | Sì | No | Sì 3 | Sì 3 | No |
| Elenca job | Sì | Sì | Sì | Sì | Sì |
| Ottieni i dettagli del job | Sì | Sì | Sì 4 | Sì 4 | Sì 4 |
| Annulla job | Sì | No | Sì | Sì | No |
| Elimina job | Sì | No | Sì | Sì | No |
| Elenca operazioni | Sì | Sì | Sì | Sì | Sì |
| Ottieni i dettagli dell'operazione | Sì | Sì | Sì | Sì | Sì |
| Elimina operazione | Sì | No | Sì | Sì | No |
Note:
- Il grafico sul rendimento non è disponibile, a meno che l'utente non abbia anche un ruolo con l'autorizzazione
monitoring.timeSeries.list. - L'elenco delle VM nel cluster non includerà informazioni sullo stato o un link SSH per l'istanza master, a meno che l'utente non disponga anche di un ruolo con l'autorizzazione
compute.instances.list. - I job che caricano file richiedono che l'utente disponga del ruolo
Storage Object Creatoro dell'accesso in scrittura al bucket di gestione temporanea di Managed Service for Apache Spark. - L'output del job non è disponibile, a meno che l'utente non disponga anche del ruolo Storage Object Visualizzatore o non abbia ricevuto l'accesso in lettura al bucket di gestione temporanea per il progetto.
Ambiti di accesso alle VM di Managed Service for Apache Spark
Gli ambiti di accesso alle VM e i ruoli IAM interagiscono per limitare l'accesso alle VM alle API Cloud de Confiance. Ad esempio, se alle VM del cluster viene concesso solo l'ambito https://www.googleapis.com/auth/storage-full, le applicazioni in esecuzione sulle VM del cluster possono chiamare le API Cloud Storage, ma non possono effettuare richieste a BigQuery, anche se vengono eseguite come un account di servizio VM a cui è stato concesso un ruolo BigQuery con autorizzazioni ampie.
Una best practice consiste nel concedere alle VM l'ampio ambito cloud-platform (https://www.googleapis.com/auth/cloud-platform) e poi limitare l'accesso alle VM concedendo ruoli IAM specifici al service account della VM (vedi Best practice per gli ambiti).
Ambiti delle VM di Managed Service for Apache Spark predefiniti. Se gli ambiti non vengono specificati durante la creazione di un cluster (consulta gcloud dataproc cluster create --scopes), le VM di Managed Service for Apache Spark hanno il seguente insieme di ambiti predefiniti:
https://www.googleapis.com/auth/cloud-platform (clusters created with image version 2.1+).
https://www.googleapis.com/auth/bigquery
https://www.googleapis.com/auth/bigtable.admin.table
https://www.googleapis.com/auth/bigtable.data
https://www.googleapis.com/auth/cloud.useraccounts.readonly
https://www.googleapis.com/auth/devstorage.full_control
https://www.googleapis.com/auth/devstorage.read_write
https://www.googleapis.com/auth/logging.write
Se specifichi gli ambiti durante la creazione di un cluster, le VM del cluster avranno gli ambiti che specifichi e il seguente insieme minimo di ambiti richiesti (anche se non li specifichi):
https://www.googleapis.com/auth/cloud-platform (clusters created with image version 2.1+).
https://www.googleapis.com/auth/cloud.useraccounts.readonly
https://www.googleapis.com/auth/devstorage.read_write
https://www.googleapis.com/auth/logging.write
Gestione delle policy di autorizzazione IAM
Puoi concedere ruoli IAM alle entità utilizzando le policy di autorizzazione. Puoi ottenere e impostare le policy di autorizzazione utilizzando la console Cloud de Confiance , l'API IAM o Google Cloud CLI.
- Per la console Cloud de Confiance , consulta Controllo degli accessi utilizzando la console Cloud de Confiance .
- Per l'API, consulta Controllo dell'accesso tramite l'API.
- Per Google Cloud CLI, consulta Controllo degli accessi utilizzando Google Cloud CLI.