menu
arrow_back

Processamento ETL no GCP usando o Dataflow e o BigQuery

Processamento ETL no GCP usando o Dataflow e o BigQuery

1 hora 7 créditos

GSP290

Laboratórios autoguiados do Google Cloud

Visão geral

Neste laboratório, você criará vários pipelines para ingerir dados de conjuntos publicamente disponíveis no BigQuery usando estes serviços do GCP:

  • GCS: Google Cloud Storage
  • Dataflow: Google Dataflow
  • BigQuery: tabelas do BigQuery

Você criará seu próprio pipeline de dados, incluindo as considerações sobre o design e os detalhes da implementação, para garantir que o protótipo atenda aos requisitos. Quando solicitado, abra os arquivos Python e leia os comentários.

Participe do Qwiklabs para ler o restante deste laboratório e muito mais!

  • Receber acesso temporário a Console do Google Cloud.
  • Mais de 200 laboratórios, do nível iniciante ao avançado.
  • Tamanho compacto para que você possa aprender no seu próprio ritmo.
Participe para iniciar este laboratório
Pontuação

—/100

Create a Cloud Storage Bucket

Executar etapa

/ 20

Copy Files to Your Bucket

Executar etapa

/ 10

Create the BigQuery Dataset (name: lake)

Executar etapa

/ 20

Build a Data Ingestion Dataflow Pipeline

Executar etapa

/ 10

Build a Data Transformation Dataflow Pipeline

Executar etapa

/ 10

Build a Data Enrichment Dataflow Pipeline

Executar etapa

/ 10

Build a Data lake to Mart Dataflow Pipeline

Executar etapa

/ 20