Usar a ferramenta bq

Antes de começar

1. In the Cloud de Confiance console, on the project selector page, select or create a Cloud de Confiance project.

   Roles required to select or create a project

   • Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
   • Create a project: To create a project, you need the Project Creator (roles/resourcemanager.projectCreator), which contains the resourcemanager.projects.create permission. Learn how to grant roles.

   Go to project selector

2. Verify that billing is enabled for your Cloud de Confiance project.

Se você não ativar o faturamento do projeto do Cloud de Confiance usado neste tutorial, carregue e consulte os dados no sandbox do BigQuery. O sandbox do BigQuery ensina você a usar o BigQuery com um conjunto limitado de recursos sem custos financeiros.

3. Verifique se a API BigQuery está ativada.

   Ativar a API

   Se você criou um novo projeto, a API BigQuery será ativada automaticamente.

Fazer o download do arquivo que contém os dados de origem

Você está fazendo o download de um arquivo que tem aproximadamente 7 MB de dados com os nomes mais comuns de bebês. Ele é fornecido pela Administração da Previdência Social dos EUA.

Para mais informações sobre os dados, consulte as Informações básicas sobre nomes populares da Administração da Previdência Social.

1. Faça o download dos dados da Administração de Previdência Social dos EUA abrindo o URL a seguir em uma nova guia do navegador:

   https://www.ssa.gov/OACT/babynames/names.zip
   

2. Extraia o arquivo.

   Para mais informações sobre o esquema do conjunto de dados, consulte o arquivo NationalReadMe.pdf extraído.

3. Para conferir os dados, abra o arquivo yob2024.txt. Esse arquivo contém valores separados por vírgula para nome, sexo atribuído no nascimento e número de crianças com esse nome. O arquivo não tem linha de cabeçalho.

4. Mova o arquivo para o diretório de trabalho.

   • Se você estiver trabalhando no Cloud Shell, clique em more_vert Mais Fazer upload, clique em Escolher arquivos, escolha o arquivo yob2024.txt e clique em Fazer upload.

   • Se estiver trabalhando em um shell local, copie ou mova o arquivo yob2024.txt para o diretório em que você está executando a ferramenta bq.

crie um conjunto de dados

1. Insira o comando a seguir para criar um conjunto de dados chamado babynames:

   bq mk --dataset babynames
   

   O resultado será semelhante ao seguinte:

   Dataset 'babynames' successfully created.
   

2. Verifique se o conjunto de dados babynames agora aparece no seu projeto:

   bq ls --datasets=true
   

   O resultado será assim:

     datasetId
   -------------
     babynames
   

Carregar dados em uma tabela

1. No conjunto de dados babynames, carregue o arquivo de origem yob2024.txt em uma nova tabela chamada names2024:

   bq load babynames.names2024 yob2024.txt name:string,assigned_sex_at_birth:string,count:integer
   

   O resultado será semelhante ao seguinte:

   Upload complete.
   Waiting on bqjob_r3c045d7cbe5ca6d2_0000018292f0815f_1 ... (1s) Current status: DONE
   

2. Confirme se a tabela names2024 agora aparece no conjunto de dados babynames:

   bq ls --format=pretty babynames
   

   O resultado será semelhante ao seguinte: Algumas colunas são omitidas para simplificar o resultado.

   +-----------+-------+
   |  tableId  | Type  |
   +-----------+-------+
   | names2024 | TABLE |
   +-----------+-------+
   

3. Confirme se o esquema da nova tabela names2024 é name: string, assigned_sex_at_birth: string e count: integer:

   bq show babynames.names2024
   

   O resultado será semelhante ao seguinte: Algumas colunas são omitidas para simplificar a saída.

     Last modified        Schema                      Total Rows   Total Bytes
   ----------------- ------------------------------- ------------ ------------
   14 Mar 17:16:45   |- name: string                    31904       607494
                     |- assigned_sex_at_birth: string
                     |- count: integer
   

Consultar os dados da tabela

1. Determine os nomes de meninas mais comuns nos dados:

   bq query \
       'SELECT
         name,
         count
       FROM
         babynames.names2024
       WHERE
         assigned_sex_at_birth = "F"
       ORDER BY
         count DESC
       LIMIT 5'
   

   O resultado será semelhante ao seguinte:

   +-----------+-------+
   |   name    | count |
   +-----------+-------+
   | Olivia    | 14718 |
   | Emma      | 13485 |
   | Amelia    | 12740 |
   | Charlotte | 12552 |
   | Mia       | 12113 |
   +-----------+-------+
   

2. Determine os nomes de meninos menos comuns nos dados:

   bq query \
       'SELECT
         name,
         count
       FROM
         babynames.names2024
       WHERE
         assigned_sex_at_birth = "M"
       ORDER BY
         count ASC
       LIMIT 5'
   

   O resultado será semelhante ao seguinte:

   +---------+-------+
   |  name   | count |
   +---------+-------+
   | Aaran   |     5 |
   | Aadiv   |     5 |
   | Aadarsh |     5 |
   | Aarash  |     5 |
   | Aadrik  |     5 |
   +---------+-------+
   

   A contagem mínima é 5, porque os nomes com menos de 5 ocorrências não são exibidos nos dados de origem.

Limpar

Para evitar cobranças na conta do Cloud de Confiance pelos recursos usados nesta página, siga as etapas abaixo.

Excluir o projeto

Se você usou o sandbox do BigQuery para consultar o conjunto de dados público, o faturamento não está ativado para seu projeto, e não é necessário excluir o projeto.

O jeito mais fácil de evitar cobranças é excluindo o projeto que você criou para o tutorial.

Para excluir o projeto:

1. In the Cloud de Confiance console, go to the Manage resources page.

   Go to Manage resources

2. In the project list, select the project that you want to delete, and then click Delete.
3. In the dialog, type the project ID, and then click Shut down to delete the project.

Excluir os recursos

Se você usou um projeto atual, exclua os recursos criados:

1. Exclua o conjunto de dados babynames:

   bq rm --recursive=true babynames
   

   A flag --recursive exclui todas as tabelas do conjunto de dados, incluindo a tabela names2024.

   O resultado será semelhante ao seguinte:

   rm: remove dataset 'myproject:babynames'? (y/N)
   

2. Para confirmar o comando de exclusão, insira y.

A seguir

• Saiba mais sobre como usar a ferramenta bq.
• Saiba mais sobre o sandbox do BigQuery.
• Saiba como carregar dados no BigQuery.
• Saiba como consultar dados no BigQuery.