Ottieni informazioni chiave sulla spesa per l'allocazione delle risorse e i costi dei cluster GKE

Questa pagina mostra come ottenere informazioni chiave sulla spesa per prendere decisioni informate in merito all'allocazione delle risorse e all'ottimizzazione dei costi utilizzando l'allocazione dei costi di Google Kubernetes Engine (GKE). Scopri la differenza tra l'allocazione dei costi di GKE e la misurazione dell'utilizzo del cluster, le limitazioni dell'allocazione dei costi di GKE, come attivare l'allocazione dei costi di GKE sui cluster nuovi ed esistenti e come filtrare ed eseguire query sull'esportazione BigQuery della fatturazione Cloud.

Questa pagina è rivolta a operatori, architetti cloud, sviluppatori e amministratori dei dati che devono gestire i costi durante la creazione e la configurazione dei cluster e il deployment dei carichi di lavoro in GKE. Per scoprire di più sui ruoli comuni, consulta Ruoli utente e attività comuni di GKE Enterprise.

Prima di leggere questa pagina, ti consigliamo di acquisire familiarità con le best practice per l'esecuzione di applicazioni Kubernetes con ottimizzazione dei costi su GKE.

Potenziale aumento del volume di dati

L'attivazione dell'allocazione dei costi di GKE può aumentare i costi di archiviazione ed esecuzione di query in BigQuery. L'aumento esatto dipende dal numero di combinazioni distinte di etichette e spazi dei nomi che utilizzi in pod e cluster.

L'attivazione dell'allocazione dei costi di GKE non modifica il costo totale del tuo utilizzo di GKE. La somma delle voci di costo nell'esportazione è la stessa e le query e i report esistenti che hai creato nell'esportazione della fatturazione restituiscono gli stessi valori.

Allocazione dei costi di GKE e misurazione dell'utilizzo del cluster

L'allocazione dei costi di GKE è diversa dalla misurazione dell'utilizzo del cluster nei seguenti modi:

• L'allocazione dei costi di GKE fornisce un'alternativa alla misurazione dell'utilizzo del cluster per ottenere informazioni sul cluster.
• L'allocazione dei costi di GKE calcola i costi del cluster nel tuo account di fatturazione Cloud anziché aggregare i dati in un modello di Looker Studio.
• L'allocazione dei costi di GKE ti consente di visualizzare i dati di costo dei cluster nella console di Trusted Cloud fatturazione Cloud e nell'esportazione dettagliata della fatturazione Cloud.

Prima di iniziare

Prima di iniziare, assicurati di aver eseguito le seguenti operazioni:

• Attiva l'API Google Kubernetes Engine.
Attiva l'API Google Kubernetes Engine
• Se vuoi utilizzare Google Cloud CLI per questa attività, installala e poi inizializzala. Se hai già installato gcloud CLI, scarica l'ultima versione eseguendo gcloud components update.

• Assicurati di aver completato i passaggi per esportare i dati dettagliati sui costi di utilizzo in BigQuery. Se la tua organizzazione sta già esportando dati, devi disporre dell'accesso per eseguire query sulle tabelle.

Limitazioni e restrizioni

• Puoi visualizzare i dati di allocazione dei costi di GKE solo nell'esportazione dei dati dettagliati sui costi di utilizzo di Cloud Billing BigQuery.
• Devi disporre di Google Cloud CLI versione 392.0.0 o successive
• Se abiliti l'allocazione dei costi di GKE, l'esportazione della fatturazione inizia a includere voci aggiuntive per le risorse GKE a partire da quella data. L'esportazione della fatturazione non riempie i dati.
• Se disattivi l'allocazione dei costi di GKE, l'esportazione della fatturazione non includerà più elementi pubblicitari aggiuntivi, ma non modificherà né rimuoverà gli elementi pubblicitari precedenti generati mentre la funzionalità era attiva.
• I dati di allocazione dei costi di GKE si basano sulle richieste di risorse, non sulle risorse consumate. Per saperne di più sulle differenze tra richieste di risorse, limiti delle risorse e consumo di risorse, consulta Best practice di Kubernetes: richieste e limiti delle risorse.
• L'allocazione dei costi di GKE supporta i seguenti tipi di SKU risorsa:
  • SKU vCPU dell'istanza VM di Compute Engine
  • SKU RAM dell'istanza VM di Compute Engine
  • SKU RAM istanza estesa personalizzata VM di Compute Engine
  • SKU GPU dell'istanza VM di Compute Engine
  • SKU per la capacità dei dischi permanenti Compute Engine
  • SKU delle istanze Cloud TPU
• Se un pod ha più di 50 etichette Kubernetes, nessuna di queste etichette sarà disponibile nella sezione Fatturazione Cloud della console Trusted Cloud o nell'esportazione dettagliata della fatturazione Cloud.
• Dopo aver abilitato l'allocazione dei costi di GKE, potrebbero essere necessari fino a tre giorni prima che i dati vengano visualizzati nella fatturazione Cloud.
• L'allocazione dei costi di GKE include i dati dei dischi permanenti con le seguenti eccezioni:
  • Supporta solo le risorse PersistentVolume di cui è stato eseguito il provisioning in modo dinamico tramite PersistentVolumeClaims o volumi effimeri generici.
  • Supporta solo le risorse PersistentVolume di cui è stato eseguito il provisioning dal driver CSI per il disco permanente di Compute Engine o con il plug-in di archiviazione kubernetes.io/gce-pd ritirato con modalità di accesso ReadWriteOnce o ReadWriteOncePod.
  • I dischi permanenti con un uptime inferiore a 30 minuti potrebbero non essere monitorati. I dischi permanenti con almeno 30 minuti di uptime vengono sempre monitorati.
• La versione di Cloud TPU deve essere Cloud TPU v4 o successive.

Visualizzare i costi del cluster GKE

Quando abiliti l'allocazione dei costi di GKE, il nome del cluster e lo spazio dei nomi dei tuoi carichi di lavoro GKE vengono visualizzati nel campo labels dell'esportazione della fatturazione in BigQuery:

Per ulteriori informazioni, consulta Schema dei dati dettagliati sui costi di utilizzo.

Inoltre, i seguenti spazi dei nomi vengono utilizzati per monitorare le risorse generali e non allocate:

• kube:system-overhead: questo valore tiene conto delle risorse del nodo non disponibili per i pod. Queste risorse vengono riservate dal sistema per l'esecuzione del framework Kubernetes (incluso, a titolo esemplificativo, kubelet, kube-proxy, containerd). Questa è la differenza tra la capacità del nodo e le risorse allocabili.
• kube:unallocated: Le risorse non vengono richieste dai carichi di lavoro né per l'overhead di sistema.

Se GKE non riesce a determinare l'allocazione dei costi per una risorsa, l'esportazione include uno dei seguenti valori:

• goog-k8s-unknown: Fatturazione Cloud non è riuscita a elaborare lo SKU. Ciò può verificarsi quando viene eseguito il provisioning di una nuova istanza Compute Engine. Puoi aspettarti alcuni valori goog-k8s-unknown durante l'avvio e l'arresto dei nodi, ad esempio quando GKE esegue lo scale automatico di un cluster.
• goog-k8s-unsupported-sku: l'allocazione dei costi di GKE non supporta questo SKU. Consideralo come <blank>/NULL. Non vi è alcuna garanzia che uno SKU sia sempre etichettato con questo valore.
• <blank>/NULL: l'allocazione dei costi di GKE non monitora questa risorsa. Ciò può verificarsi quando l'allocazione dei costi GKE non è attivata o la risorsa non appartiene a un cluster gestito da GKE.

I costi per i dischi permanenti vengono monitorati quando il backing del Persistent Disk PersistentVolumeClaims viene rivendicato dai pod. I costi del disco permanente ereditano tutti i metadati, come le etichette e gli spazi dei nomi dei pod, del pod richiedente, finché non vengono eliminati i relativi PersistentVolumeClaims. Per PersistentVolumeClaims che vengono eliminati ma conservano PersistentVolumes in base alle norme di recupero, i costi dei dischi permanenti vengono monitorati come non allocati.

Le etichette applicate direttamente a PersistentVolumeClaims non vengono visualizzate nella sezione Fatturazione Cloud della console Trusted Cloud o nell'esportazione dettagliata della fatturazione Cloud.

Per la RAM estesa, la stessa proporzione del costo totale viene allocata a un carico di lavoro sia per gli SKU RAM normale che per gli SKU RAM estesa in base alla risorsa richiesta.

Abilita l'allocazione dei costi di GKE

Puoi attivare l'allocazione dei costi di GKE su un cluster nuovo o esistente utilizzando gcloud CLI o la console Trusted Cloud .

Crea un nuovo cluster

gcloud container clusters create CLUSTER_NAME \
    --enable-cost-allocation \
    --location=CONTROL_PLANE_LOCATION

Aggiorna un cluster

gcloud container clusters update CLUSTER_NAME \
    --enable-cost-allocation

Verifica che l'allocazione dei costi di GKE sia abilitata

gcloud container clusters describe CLUSTER_NAME

...
costManagementConfig:
  enabled: true
...

Filtrare i dati di costo di GKE

Gli esempi di query riportati di seguito mostrano come filtrare e raggruppare i costi di GKE per i tipi di risorse supportati in base a nome del cluster, spazio dei nomi ed etichetta.

SELECT
  labels.value as namespace,
  SUM(cost) + SUM(IFNULL((SELECT SUM(c.amount) FROM UNNEST(credits) c), 0)) AS cost_after_credits,
FROM `project-ID.dataset.gcp_billing_export_resource_v1_XXXXXX-XXXXXX-XXXXXX`
LEFT JOIN UNNEST(labels) as labels
  ON labels.key = "k8s-namespace"
GROUP BY namespace
;

SELECT
  SUM(cost) AS cost_before_credits,
  labels.value AS cluster_name
FROM  `project-ID.dataset.gcp_billing_export_resource_v1_XXXXXX-XXXXXX-XXXXXX`
LEFT JOIN UNNEST(labels) as labels
  ON labels.key = "goog-k8s-cluster-name"
GROUP BY labels.value
;

SELECT
  project.id AS project_id,
  labels.value AS cluster_name,
  sku.id AS sku_id,
  sku.description AS sku_description,
  SUM(cost) AS cost
FROM `project-ID.dataset.gcp_billing_export_resource_v1_XXXXXX-XXXXXX-XXXXXX`
JOIN UNNEST(labels) AS labels
  ON labels.key = "goog-k8s-cluster-name"
GROUP BY
  cluster_name, project_id, sku_description, sku_id
;

Sostituisci BILLING_DATASET_TABLE con il nome del set di dati che hai creato in BigQuery.

Il nome della tabella è simile a gcp_billing_export_resource_v1_<BILLING_ACCOUNT_ID>.

Esegui la pulizia

Per evitare che al tuo account Trusted Cloud vengano addebitati costi relativi alle risorse utilizzate in questa pagina, disattiva l'allocazione dei costi di GKE per il cluster:

gcloud container clusters update CLUSTER_NAME \
    --no-enable-cost-allocation

Puoi anche eliminare il cluster che hai creato.

Passaggi successivi

• Visualizza altri esempi di query per l'esportazione dei dati di fatturazione Cloud.
• Scopri come visualizzare i costi con Looker Studio.