Como criar o ETL Job na AWS Glue

Como criar o ETL Job na AWS Glue

A AWS Glue é um serviço de computação poderoso sem servidor da AWS, muitas empresas começaram a usá -lo para inteligência de negócios e integração de dados. A AWS Glue também é usada para criar, gerenciar e executar o trabalho ETL Job, ETL (Extrair, Transformar e Carregar) é um processo para mover dados do banco de dados de origem para o banco de dados de destino.

Este post fornecerá um guia processual para criar um trabalho ETL na AWS Glue.

Crie um trabalho ETL na AWS Glue

No console de gerenciamento da Amazon, pesquise Aws cola e clique nele:

Clique em trabalhos:

O próximo passo é escolher o método de criação de empregos, neste post, vamos Selecione um visual com uma fonte e destino e selecione Fonte e Target:

Clique no trabalho ETL:

Selecione a fonte e forneça o tipo de fonte S3, URL S3 e formato de dados:

Selecione o balde de destino S3 e forneça o formato, o tipo de compressão e a localização do destino S3:

Selecione a guia Detalhes do trabalho e escolha o papel do IAM:

Deixe a outra opção como padrão e clique em Salvar:

Uma mensagem de sucesso aparecerá:

Execute o trabalho ETL na AWS Glue

Clique no Correr botão:

Uma mensagem de sucesso aparecerá na tela assim que o trabalho começar:

Vá para a guia Runs, para ver se o trabalho do ETL Job Run Status:

Pare o trabalho ETL na AWS Glue

Para parar o trabalho ETL na guia Runs, clique no Stop Job correr botão:

O status do trabalho mudará conforme parado:

Excluir trabalho ETL na AWS Glue

Clique na lista suspensa de ação e selecione a opção Excluir:

Clique no Excluir botão:

Uma mensagem de sucesso aparecerá assim que o trabalho excluirá:

Um trabalho é excluído com sucesso.

Conclusão

Para criar um trabalho ETL na AWS, acesse a AWS Glue e selecione Jobs, escolha o método para criar um trabalho, fornecer os detalhes necessários do banco de dados de origem e do banco de dados de destino e clique no botão Salvar para criar um trabalho ETL. Depois de criar o trabalho ETL, você pode correr, parar e excluir o trabalho facilmente.