Airflow gerenciado no Cloud de Confiance e no Google Cloud

O Airflow Gerenciado é um serviço de orquestração de fluxos de trabalho totalmente gerenciado, que permite criar, programar, monitorar e gerenciar pipelines de fluxo de trabalho que abrangem nuvens e data centers locais.

O Airflow Gerenciado é baseado no conhecido projeto de código aberto Apache Airflow e opera usando a linguagem de programação Python.

Nesta página, descrevemos as diferenças entre as versões do Airflow Gerenciado do Cloud de Confiance e do Google Cloud.

Para informações detalhadas sobre o Airflow Gerenciado, confira a Visão geral do Airflow Gerenciado e o restante da documentação do Airflow Gerenciado.

principais diferenças

Há algumas diferenças entre a versão do Cloud de Confiance do Airflow Gerenciado e a do Google Cloud. Se você já conhece o Google Cloud, recomendamos que analise essas diferenças com atenção, principalmente antes de criar um aplicativo para ser executado no Cloud de Confiance. Também recomendamos que você verifique as diferenças gerais entre o Cloud de Confiance e o Google Cloud.

Se você quiser usar um recurso específico do Airflow Gerenciado que não está disponível no momento no Cloud de Confiance, entre em contato com o suporte doCloud de Confiance . Para receber notificações quando novos recursos forem lançados no Cloud de Confiance, inscreva-se para receber as notas da versão. Exceto quando indicado, recursos em pré-lançamento não estão disponíveis em Cloud de Confiance.

Versões

Versões do Airflow gerenciado Somente os ambientes do Airflow Gerenciado (3ª geração) estão disponíveis no Cloud de Confiance. Não é possível criar ambientes do Airflow Gerenciado (2ª geração) ou do Airflow Gerenciado (1ª geração legada).
Versões do Airflow Somente as versões do Airflow compatíveis com o Airflow Gerenciado (Geração 3) estão disponíveis no Cloud de Confiance.

Disponibilidade

Modos de resiliência Somente ambientes altamente resilientes (altamente disponíveis) estão disponíveis no Cloud de Confiance. Não é possível alterar o modo de resiliência de um ambiente atual.
Tamanho do ambiente Somente o tamanho de ambiente Grande está disponível no Cloud de Confiance. Não é possível selecionar outros valores para o tamanho da infraestrutura do ambiente, e não é possível ajustar esse parâmetro para um ambiente atual.
Predefinições de ambiente As predefinições de ambiente, exceto as personalizadas, não estão disponíveis no Cloud de Confiance. Ao criar um ambiente, selecione a predefinição "Personalizado", o tamanho da infraestrutura do ambiente "Grande" e insira manualmente os valores dos limites de recursos.
Janelas de manutenção

No Cloud de Confiance, as janelas de manutenção personalizadas não se aplicam à instância do Cloud SQL que hospeda o banco de dados do Airflow do ambiente:

  • A instância do Cloud SQL é mantida durante as janelas de manutenção padrão fornecidas pelo Cloud SQL.
  • Outros componentes do ambiente são mantidos como de costume, durante as janelas de manutenção especificadas (ou usam janelas de manutenção padrão).

Integrações

Operadores do Airflow

No Cloud de Confiance, os seguintes operadores do Airflow não estão disponíveis:

  • Os operadores do Airflow para serviços do Google que estão fora do Cloud de Confiance, como o Google Docs, o Google Planilhas e o Google Ads, não estão disponíveis.
  • Os operadores do Airflow para outros provedores de serviços, como AWS, Azure e Snowflake, não estão disponíveis no Cloud de Confiance.

As informações a seguir também podem afetar o modo como você usa e cria o Airflow Gerenciado no Cloud de Confiance by S3NS. Esses guias incluem informações gerais para trabalhar no Cloud de Confiance, incluindo documentação, segurança e controle de acesso, faturamento, ferramentas e uso do serviço.

Para detalhes sobre outros serviços e recursos na Cloud de Confiance e as diferenças deles em relação aos equivalentes do Google Cloud, consulte a lista de produtos.