Carregar dados do Klaviyo no BigQuery
Para programar transferências de dados recorrentes do Klaviyo para o BigQuery, crie uma configuração de transferência para especificar quais objetos de dados transferir e com que frequência programar a transferência de dados. É possível criar
uma configuração de transferência usando o Cloud de Confiance console ou a bq
ferramenta de linha de comando. Depois de configurar a transferência, o
serviço de transferência de dados do BigQuery transfere os dados mais recentes
para uma tabela do BigQuery na programação especificada.
Para saber como funciona uma transferência do Klaviyo, consulte Introdução às transferências do Klaviyo.
Antes de começar
As seções a seguir descrevem os pré-requisitos necessários antes de criar uma transferência de dados do Klaviyo.
Pré-requisitos do Klaviyo
Você precisa ter uma chave de API privada somente leitura para permitir que o conector do Klaviyo transfira dados para o BigQuery. Para mais informações, consulte Criar uma chave privada.
Pré-requisitos do BigQuery
- Verifique se você realizou todas as ações necessárias para ativar o serviço de transferência de dados do BigQuery.
- Crie um conjunto de dados do BigQuery para armazenar os dados.
Papéis obrigatórios do BigQuery
Para receber as permissões necessárias para criar uma transferência de dados do serviço de transferência de dados do BigQuery, peça ao administrador para conceder a você oAdministrador do BigQuery (roles/bigquery.admin) papel do IAM no seu projeto.
Para mais informações sobre a concessão de papéis, consulte Gerenciar o acesso a projetos, pastas e organizações.
Esse papel predefinido contém as permissões necessárias para criar uma transferência de dados do serviço de transferência de dados do BigQuery. Para acessar as permissões exatas que são necessárias, expanda a seção Permissões necessárias:
Permissões necessárias
As seguintes permissões são necessárias para criar uma transferência de dados do serviço de transferência de dados do BigQuery:
-
Permissões do serviço de transferência de dados do BigQuery:
-
bigquery.transfers.update -
bigquery.transfers.get
-
-
Permissões do BigQuery:
-
bigquery.datasets.get -
bigquery.datasets.getIamPolicy -
bigquery.datasets.update -
bigquery.datasets.setIamPolicy -
bigquery.jobs.create
-
Essas permissões também podem ser concedidas com papéis personalizados ou outros papéis predefinidos.
Para mais informações, consulte Conceder acesso bigquery.admin.
Se você pretende configurar notificações de execução de transferência do Pub/Sub, verifique se tem a permissão do IAM pubsub.topics.setIamPolicy. As permissões do Pub/Sub não serão necessárias caso você configure apenas notificações por e-mail. Para saber mais informações, consulte
Notificações de execução do serviço de transferência de dados do BigQuery.
Configurar uma transferência de dados do Klaviyo
Adicione dados do Klaviyo ao BigQuery configurando uma transferência usando uma das seguintes opções:
Console
Acesse a página "Transferências de dados" no Cloud de Confiance console.
Clique em Criar transferência.
Na seção Tipo de origem, em Origem, escolha Klaviyo - Visualização.
Na seção Detalhes da fonte de dados, faça o seguinte:
- Em Chave de API privada, insira sua chave de API privada. Para mais informações, consulte Pré-requisitos do Klaviyo.
- Opcional: em Data de início, especifique uma data de início para que novos registros sejam incluídos na transferência de dados. Somente os registros criados nessa data ou depois dela serão incluídos na transferência de dados. O valor padrão é de três meses antes da data de execução da transferência.
- Em Objetos do Klaviyo para transferência, clique em Procurar para selecionar os objetos a serem transferidos para o conjunto de dados de destino do BigQuery. Nesse campo, também é possível inserir manualmente qualquer objeto para incluir na transferência de dados.
Na seção Configurações de destino, no campo Conjunto de dados, escolha o conjunto de dados que você criou para armazenar seus dados.
No campo Nome de exibição da seção Nome de configuração da transferência, insira um nome para a transferência de dados.
Na seção Opções de programação, faça o seguinte:
- Na lista Frequência de repetição, selecione uma opção para especificar com que frequência essa transferência de dados é executada. Para especificar uma frequência de repetição personalizada, selecione Personalizada. Se você selecionar Sob demanda, essa transferência será executada quando você acionar manualmente a transferência.
- Se aplicável, selecione Começar agora ou Começar no horário definido e escolha uma data de início e hora de execução.
Opcional: na seção Opções de notificação, faça o seguinte:
- Para ativar as notificações por e-mail, clique no botão que ativa as Notificações por e-mail. Quando essa opção está ativada, o administrador da transferência recebe uma notificação por e-mail quando uma execução da transferência falha.
- Para ativar as notificações de execução de transferência do Pub/Sub para essa transferência, clique no botão de alternância Notificações do Pub/Sub. Selecione o nome do tópico ou clique em Criar tópico.
Clique em Salvar.
bq
Insira o comando bq mk
e forneça a sinalização de execução da transferência
--transfer_config:
bq mk --transfer_config --project_id=PROJECT_ID --data_source=DATA_SOURCE --display_name=NAME --target_dataset=DATASET --params='PARAMETERS'
Substitua:
PROJECT_ID(opcional): o ID do seu Cloud de Confiance by S3NS projeto. Se--project_idnão for fornecido para especificar um projeto determinado, o projeto padrão será usado;DATA_SOURCE: a fonte de dados —klaviyo.NAME: o nome de exibição da configuração da transferência de dados. O nome da transferência pode ser qualquer valor que permita identificá-la, caso você precise modificá-la mais tarde.DATASET: o conjunto de dados de destino na configuração da transferência.PARAMETERSé o parâmetro da configuração de transferência criada no formato JSON. Por exemplo:--params='{"param":"param_value"}'. Veja a seguir os parâmetros de uma transferência de dados do Klaviyo:assets: o caminho para os objetos do Klaviyo a serem transferidos para o BigQuery.connector.authentication.privateApiKey: a chave de API privada da conta do Klaviyo.connector.startDate: (opcional) uma data de início para que novos registros sejam incluídos na transferência de dados, no formatoYYYY-MM-DD. Somente os registros criados nessa data ou depois dela serão incluídos na transferência de dados. O valor padrão é de três meses antes da data de execução da transferência.
O comando a seguir cria uma transferência de dados do Klaviyo no projeto padrão.
bq mk --transfer_config --target_dataset=mydataset --data_source=klaviyo --display_name='My Transfer' --params= ' { "assets": [ "Events" , "Flows"] , "connector.authentication.privateApiKey" : "pk_123456789123", "connector.startDate": "2025-10-20" }'
Para executar manualmente uma transferência de dados fora da programação normal, você pode iniciar uma execução de preenchimento.
Para uma lista de dados incluídos em uma transferência de dados do Klaviyo, consulte Referência do modelo de dados do Klaviyo.
Resolver problemas na configuração da transferência
Se você tiver problemas para configurar a transferência de dados, consulte Problemas de transferência do Klaviyo.
A seguir
- Para uma visão geral do serviço de transferência de dados do BigQuery, consulte O que é o serviço de transferência de dados do BigQuery.
- Para informações sobre o uso de transferências, incluindo detalhes sobre a configuração, listar configurações e visualizar o histórico de execução de uma transferência, consulte Como trabalhar com transferências.