GSP762

Visão geral

Neste laboratório, você vai criar um app da Web no Cloud Run, um serviço sem servidor, para converter automaticamente em PDF os arquivos armazenados no Google Drive e colocar esses arquivos em pastas separadas.

Conteúdo

• Converter um aplicativo Go em um contêiner
• Aprender a criar contêineres com o Google Cloud Build
• Criar um serviço do Cloud Run que converte arquivos em PDF na nuvem
• Entender como criar contas de serviço e adicionar permissões
• Usar o processamento de eventos no Cloud Storage

Pré-requisitos

Para este laboratório de nível fundamental, é preciso ter familiaridade com o console do Cloud e o Cloud Shell.

Você também precisa ter noções básicas de edição de arquivos. Escolha um editor de texto (como nano, vi etc.) ou inicie o editor de código do Cloud Shell, disponível na barra superior:

Configuração e requisitos

Antes de clicar no botão Start Lab

Leia estas instruções. Os laboratórios são cronometrados e não podem ser pausados. O timer é iniciado quando você clica em Começar o laboratório e mostra por quanto tempo os recursos do Google Cloud vão ficar disponíveis.

Este laboratório prático permite que você realize as atividades em um ambiente real de nuvem, não em uma simulação ou demonstração. Você vai receber novas credenciais temporárias para fazer login e acessar o Google Cloud durante o laboratório.

Confira os requisitos para concluir o laboratório:

• Acesso a um navegador de Internet padrão (recomendamos o Chrome).

Observação: para executar este laboratório, use o modo de navegação anônima ou uma janela anônima do navegador. Isso evita conflitos entre sua conta pessoal e a conta de estudante, o que poderia causar cobranças extras na sua conta pessoal.

• Tempo para concluir o laboratório---não se esqueça: depois de começar, não será possível pausar o laboratório.

Observação: não use seu projeto ou conta do Google Cloud neste laboratório para evitar cobranças extras na sua conta.

Como iniciar seu laboratório e fazer login no console do Google Cloud

1. Clique no botão Começar o laboratório. Se for preciso pagar, você verá um pop-up para selecionar a forma de pagamento. No painel Detalhes do laboratório à esquerda, você verá o seguinte:

   • O botão Abrir Console do Cloud
   • Tempo restante
   • As credenciais temporárias que você vai usar neste laboratório
   • Outras informações se forem necessárias

2. Clique em Abrir Console do Google. O laboratório ativa recursos e depois abre outra guia com a página Fazer login.

   Dica: coloque as guias em janelas separadas lado a lado.

   Observação: se aparecer a caixa de diálogo Escolher uma conta, clique em Usar outra conta.

3. Caso seja preciso, copie o Nome de usuário no painel Detalhes do laboratório e cole esse nome na caixa de diálogo Fazer login. Clique em Avançar.

4. Copie a Senha no painel Detalhes do laboratório e a cole na caixa de diálogo Olá. Clique em Avançar.

   Importante: você precisa usar as credenciais do painel à esquerda. Não use suas credenciais do Google Cloud Ensina. Observação: se você usar sua própria conta do Google Cloud neste laboratório, é possível que receba cobranças adicionais.

5. Acesse as próximas páginas:

   • Aceite os Termos e Condições.
   • Não adicione opções de recuperação nem autenticação de dois fatores (porque essa é uma conta temporária).
   • Não se inscreva em testes gratuitos.

Depois de alguns instantes, o console do GCP vai ser aberto nesta guia.

Observação: para ver uma lista dos produtos e serviços do Google Cloud, clique no Menu de navegação no canto superior esquerdo.

Ativar o Cloud Shell

O Cloud Shell é uma máquina virtual com várias ferramentas de desenvolvimento. Ele tem um diretório principal permanente de 5 GB e é executado no Google Cloud. O Cloud Shell oferece acesso de linha de comando aos recursos do Google Cloud.

1. Clique em Ativar o Cloud Shell na parte de cima do console do Google Cloud.

Depois de se conectar, vai notar que sua conta já está autenticada, e que o projeto está configurado com seu PROJECT_ID. A saída contém uma linha que declara o projeto PROJECT_ID para esta sessão:

Your Cloud Platform project in this session is set to YOUR_PROJECT_ID

gcloud é a ferramenta de linha de comando do Google Cloud. Ela vem pré-instalada no Cloud Shell e aceita preenchimento com tabulação.

2. (Opcional) É possível listar o nome da conta ativa usando este comando:

gcloud auth list

3. Clique em Autorizar.

4. A saída será parecida com esta:

Saída:

ACTIVE: * ACCOUNT: student-01-xxxxxxxxxxxx@qwiklabs.net To set the active account, run: $ gcloud config set account `ACCOUNT`

5. (Opcional) É possível listar o ID do projeto usando este comando:

gcloud config list project

Saída:

[core] project = <project_ID>

Exemplo de saída:

[core] project = qwiklabs-gcp-44776a13dea667a6 Observação: para conferir a documentação completa da gcloud, acesse o guia com informações gerais sobre a gcloud CLI no Google Cloud.

Arquitetura

Neste laboratório, você vai ajudar a Pet Theory Veterinary a converter automaticamente as faturas dos clientes em formato PDF para facilitar a consulta.

Usar o Googleapis

Neste laboratório, você usará as APIs do Google. As seguintes APIs foram ativadas para você:

Nome	API
Cloud Build	cloudbuild.googleapis.com
Cloud Storage	storage-component.googleapis.com
Cloud Run	run.googleapis.com

Tarefa 1: acessar o código-fonte

Para começar, faça o download do código necessário para este laboratório.

1. Ative sua conta de laboratório:

gcloud auth list --filter=status:ACTIVE --format="value(account)"

2. Execute este comando para clonar o repositório da Pet Theory:

git clone https://github.com/Deleplace/pet-theory.git

3. Acesse o diretório correto:

cd pet-theory/lab03

Tarefa 2: criar um microsserviço de fatura

Nesta seção, você criará um aplicativo Go para processar solicitações. Conforme descrito no diagrama da arquitetura, você vai integrar o Cloud Storage como parte da solução.

1. Clique no ícone Abrir editor e depois em Abrir em uma nova janela.

2. Acesse pet-theory > lab03 > server.go

3. Abra e edite o código-fonte server.go para corresponder ao texto abaixo:

package main import ( "fmt" "io/ioutil" "log" "net/http" "os" "os/exec" "regexp" "strings" ) func main() { http.HandleFunc("/", process) port := os.Getenv("PORT") if port == "" { port = "8080" log.Printf("Defaulting to port %s", port) } log.Printf("Listening on port %s", port) err := http.ListenAndServe(fmt.Sprintf(":%s", port), nil) log.Fatal(err) } func process(w http.ResponseWriter, r *http.Request) { log.Println("Serving request") if r.Method == "GET" { fmt.Fprintln(w, "Ready to process POST requests from Cloud Storage trigger") return } // // Read request body containing Cloud Storage object metadata // gcsInputFile, err1 := readBody(r) if err1 != nil { log.Printf("Error reading POST data: %v", err1) w.WriteHeader(http.StatusBadRequest) fmt.Fprintf(w, "Problem with POST data: %v \n", err1) return } // // Working directory (concurrency-safe) // localDir, errDir := ioutil.TempDir("", "") if errDir != nil { log.Printf("Error creating local temp dir: %v", errDir) w.WriteHeader(http.StatusInternalServerError) fmt.Fprintf(w, "Could not create a temp directory on server. \n") return } defer os.RemoveAll(localDir) // // Download input file from Cloud Storage // localInputFile, err2 := download(gcsInputFile, localDir) if err2 != nil { log.Printf("Error downloading Cloud Storage file [%s] from bucket [%s]: %v", gcsInputFile.Name, gcsInputFile.Bucket, err2) w.WriteHeader(http.StatusInternalServerError) fmt.Fprintf(w, "Error downloading Cloud Storage file [%s] from bucket [%s]", gcsInputFile.Name, gcsInputFile.Bucket) return } // // Use LibreOffice to convert local input file to local PDF file. // localPDFFilePath, err3 := convertToPDF(localInputFile.Name(), localDir) if err3 != nil { log.Printf("Error converting to PDF: %v", err3) w.WriteHeader(http.StatusInternalServerError) fmt.Fprintf(w, "Error converting to PDF.") return } // // Upload the freshly generated PDF to Cloud Storage // targetBucket := os.Getenv("PDF_BUCKET") err4 := upload(localPDFFilePath, targetBucket) if err4 != nil { log.Printf("Error uploading PDF file to bucket [%s]: %v", targetBucket, err4) w.WriteHeader(http.StatusInternalServerError) fmt.Fprintf(w, "Error downloading Cloud Storage file [%s] from bucket [%s]", gcsInputFile.Name, gcsInputFile.Bucket) return } // // Delete the original input file from Cloud Storage. // err5 := deleteGCSFile(gcsInputFile.Bucket, gcsInputFile.Name) if err5 != nil { log.Printf("Error deleting file [%s] from bucket [%s]: %v", gcsInputFile.Name, gcsInputFile.Bucket, err5) // This is not a blocking error. // The PDF was successfully generated and uploaded. } log.Println("Successfully produced PDF") fmt.Fprintln(w, "Successfully produced PDF") } func convertToPDF(localFilePath string, localDir string) (resultFilePath string, err error) { log.Printf("Converting [%s] to PDF", localFilePath) cmd := exec.Command("libreoffice", "--headless", "--convert-to", "pdf", "--outdir", localDir, localFilePath) cmd.Stdout, cmd.Stderr = os.Stdout, os.Stderr log.Println(cmd) err = cmd.Run() if err != nil { return "", err } pdfFilePath := regexp.MustCompile(`\.\w+$`).ReplaceAllString(localFilePath, ".pdf") if !strings.HasSuffix(pdfFilePath, ".pdf") { pdfFilePath += ".pdf" } log.Printf("Converted %s to %s", localFilePath, pdfFilePath) return pdfFilePath, nil }

4. Agora execute este comando para criar o aplicativo:

go build -o server

As funções chamadas por esse código de nível superior estão nos arquivos de origem:

• server.go
• notification.go
• gcs.go

Depois que o aplicativo for criado, você pode criar o serviço pdf-conversion.

Tarefa 3: criar o serviço pdf-conversion

O serviço de PDF vai usar o Cloud Run e o Cloud Storage para iniciar um processo toda vez que for feito upload de um arquivo no armazenamento designado.

Para isso, você usará um padrão comum de notificações de eventos com o Cloud Pub/Sub. Assim, o aplicativo realiza apenas o processamento das informações. O transporte e a transmissão de informações são feitos por outros serviços, o que mantém o aplicativo simples.

A criação do módulo de fatura requer a integração de dois componentes:

Adicione o pacote do LibreOffice para usar no seu aplicativo.

1. Em Abrir editor, abra o manifesto Dockerfile e atualize o arquivo desta forma:

FROM debian:buster RUN apt-get update -y \ && apt-get install -y libreoffice \ && apt-get clean WORKDIR /usr/src/app COPY server . CMD [ "./server" ]

2. Salve o Dockerfile atualizado.

3. Inicie a recriação da imagem pdf-converter usando o Cloud Build:

gcloud builds submit \ --tag gcr.io/$GOOGLE_CLOUD_PROJECT/pdf-converter

Clique em Verificar meu progresso para conferir se você executou a tarefa.

Crie uma imagem com o Cloud Build

4. Implante o serviço pdf-converter atualizado.

Observação: é recomendável que o LibreOffice use 2 GB de RAM. Veja a linha com a opção --memory.

5. Execute estes comandos para criar e implantar o contêiner:

gcloud run deploy pdf-converter \ --image gcr.io/$GOOGLE_CLOUD_PROJECT/pdf-converter \ --platform managed \ --region {{{ project_0.default_region | "REGION" }}} \ --memory=2Gi \ --no-allow-unauthenticated \ --set-env-vars PDF_BUCKET=$GOOGLE_CLOUD_PROJECT-processed \ --max-instances=3

Clique em Verificar meu progresso para conferir se você executou a tarefa.

Serviço de conversão em PDF implantado

O serviço do Cloud Run foi implantado corretamente. No entanto, o aplicativo implantado requer permissões corretas para ser acessado.

Tarefa 4: criar uma conta de serviço

A conta de serviço é um tipo especial de conta com acesso às APIs do Google.

Neste laboratório, você usará uma conta de serviço para acessar o Cloud Run quando um evento do Cloud Storage for processado. O Cloud Storage oferece um conjunto avançado de notificações que podem ser usadas para acionar eventos.

Em seguida, atualize o código para notificar o aplicativo quando for feito o upload de um arquivo.

1. Clique no Menu de navegação > Cloud Storage e verifique se dois buckets foram criados. Vai aparecer o seguinte:

• PROJECT_ID-processed
• PROJECT_ID-upload

2. Crie uma notificação do Pub/Sub para indicar que um novo arquivo foi enviado ao bucket de documentos ("uploaded"). As notificações serão marcadas com o tópico "new-doc".

gsutil notification create -t new-doc -f json -e OBJECT_FINALIZE gs://$GOOGLE_CLOUD_PROJECT-upload

3. Crie uma conta de serviço para acionar os serviços do Cloud Run:

gcloud iam service-accounts create pubsub-cloud-run-invoker --display-name "PubSub Cloud Run Invoker"

4. Conceda permissão à conta de serviço para invocar o serviço de conversão em PDF:

gcloud run services add-iam-policy-binding pdf-converter \ --member=serviceAccount:pubsub-cloud-run-invoker@$GOOGLE_CLOUD_PROJECT.iam.gserviceaccount.com \ --role=roles/run.invoker \ --region {{{ project_0.default_region | "REGION" }}} \ --platform managed

5. Execute este comando para encontrar o número do seu projeto:

PROJECT_NUMBER=$(gcloud projects list \ --format="value(PROJECT_NUMBER)" \ --filter="$GOOGLE_CLOUD_PROJECT")

6. Permita que seu projeto crie tokens de autenticação do Cloud Pub/Sub:

gcloud projects add-iam-policy-binding $GOOGLE_CLOUD_PROJECT \ --member=serviceAccount:service-$PROJECT_NUMBER@gcp-sa-pubsub.iam.gserviceaccount.com \ --role=roles/iam.serviceAccountTokenCreator

Clique em Verificar meu progresso para conferir se você executou a tarefa.

A conta de serviço foi criada

A conta de serviço criada pode ser usada para invocar o serviço do Cloud Run.

Tarefa 5: testar o serviço do Cloud Run

Antes de continuar, teste o serviço implantado. Lembre-se de que o serviço requer autenticação. O teste confirmará se apenas pessoas autorizadas podem acessá-lo.

1. Salve o URL do serviço na variável de ambiente $SERVICE_URL:

SERVICE_URL=$(gcloud run services describe pdf-converter \ --platform managed \ --region {{{ project_0.default_region | "REGION" }}} \ --format "value(status.url)")

2. Exiba o SERVICE URL:

echo $SERVICE_URL

3. Envie uma solicitação GET anônima ao novo serviço:

curl -X GET $SERVICE_URL

A solicitação GET anônima será respondida com uma mensagem de erro:
"Your client does not have permission to get URL". Isso está correto, já que usuários anônimos não têm permissão para chamar o serviço.

4. Agora tente chamar o serviço como um usuário autorizado:

curl -X GET -H "Authorization: Bearer $(gcloud auth print-identity-token)" $SERVICE_URL

5. A resposta será: "Ready to process POST requests from Cloud Storage trigger"

Parabéns! Você implantou um serviço autenticado do Cloud Run.

Tarefa 6: gatilho do Cloud Storage

Para ativar uma notificação quando um conteúdo novo for enviado ao Cloud Storage, adicione uma assinatura ao tópico do Pub/Sub atual.

Observação: as notificações do Cloud Storage vão enviar automaticamente uma mensagem para sua fila de tópicos quando um conteúdo novo for enviado. O uso de notificações permite criar aplicativos que respondem a eventos sem precisar escrever mais código.

• Crie uma assinatura do Pub/Sub para executar o conversor em PDF sempre que uma mensagem for publicada no tópico new-doc:

  gcloud pubsub subscriptions create pdf-conv-sub \ --topic new-doc \ --push-endpoint=$SERVICE_URL \ --push-auth-service-account=pubsub-cloud-run-invoker@$GOOGLE_CLOUD_PROJECT.iam.gserviceaccount.com

Clique em Verificar meu progresso para conferir se você executou a tarefa.

Confirme a assinatura do Pub/Sub

Agora sempre que é feito o upload de um arquivo, a assinatura do serviço do Pub/Sub interage com sua conta. A conta de serviço vai iniciar o serviço de conversão em PDF do Cloud Run.

Tarefa 7: testar a notificação do Cloud Storage

Para testar o serviço do Cloud Run, use os arquivos de exemplo disponíveis.

1. Copie os arquivos de teste no bucket de upload:

gsutil -m cp -r gs://spls/gsp762/* gs://$GOOGLE_CLOUD_PROJECT-upload

2. No console do Cloud, clique em Cloud Storage > Buckets seguido pelo nome de bucket que termina em "-upload" e clique no botão Atualizar algumas vezes. Os arquivos serão excluídos um por um à medida que forem convertidos em PDFs.

3. Em seguida, clique em Buckets e depois no bucket com o nome que termina em "-processed". Ele contém as versões em PDF de todos os arquivos. Abra os arquivos PDF para verificar se eles foram convertidos corretamente.

4. Quando o upload for concluído, clique em Menu de navegação > Cloud Run e no serviço pdf-converter.

5. Selecione a guia Registros e adicione um filtro para "Converting" e veja os arquivos convertidos.

6. Acesse Menu de navegação > Cloud Storage e abra o nome de bucket que termina em "-upload" para confirmar que todos os arquivos forem processados.

Você criou um serviço para converter os arquivos enviados ao Cloud Storage em PDF.

Parabéns!

O serviço pdf-converter converte documentos em PDF e os armazena no bucket "processed". Neste laboratório, você aprendeu a:

• Converter um aplicativo Go em um contêiner
• Criar contêineres com o Google Cloud Build
• Criar um serviço do Cloud Run
• Conceder permissões usando uma conta de serviço
• Usar o processamento de eventos do Cloud Storage

Terminar a Quest

Este laboratório autoguiado é parte da Quest Google Cloud Run Serverless Workshop. Uma Quest é uma série de laboratórios relacionados que formam um programa de aprendizado. Ao concluir uma Quest, você ganha um selo como reconhecimento da sua conquista. É possível publicar os selos e incluir um link para eles no seu currículo on-line ou nas redes sociais. Inscreva-se nesta Quest e receba créditos de conclusão imediatamente. Consulte o catálogo do Google Cloud Ensina para conferir todas as Quests disponíveis.

Saiba mais/Próximas etapas

• Serverless Containers: vídeo da Next '19 no YouTube

Treinamento e certificação do Google Cloud

Esses treinamentos ajudam você a aproveitar as tecnologias do Google Cloud ao máximo. Nossas aulas incluem habilidades técnicas e práticas recomendadas para ajudar você a alcançar rapidamente o nível esperado e continuar sua jornada de aprendizado. Oferecemos treinamentos que vão do nível básico ao avançado, com opções de aulas virtuais, sob demanda e por meio de transmissões ao vivo para que você possa encaixá-las na correria do seu dia a dia. As certificações validam sua experiência e comprovam suas habilidades com as tecnologias do Google Cloud.

Manual atualizado em 29 de novembro de 2023

Laboratório testado em 29 de novembro de 2023

Copyright 2024 Google LLC. Todos os direitos reservados. Google e o logotipo do Google são marcas registradas da Google LLC. Todos os outros nomes de produtos e empresas podem ser marcas registradas das respectivas empresas a que estão associados.