Como criar o Hadoop Cluster com a Amazon emr
O usuário precisa das ferramentas como o Hadoop para armazenar, gerenciar e analisar big data de dados em escala e é difícil no local. Armazenar e gerenciar muitos dados pode ser feito distribuindo -os em vários computadores. A Amazon fornece o serviço EMR para gerenciar esses clusters na nuvem sem se preocupar com problemas de implantação, despesa e consumo de tempo.
Vamos começar com a criação de um cluster Hadoop com a Amazon emr.
Crie o hadoop cluster com a Amazon emr
Para criar um cluster Hadoop com a Amazon EMR, vá para o painel EMR e clique no “Criar cluster" botão:
Digite o nome do nome do cluster e selecione os aplicativos para o cluster EMR:
Definir as configurações de hardware e segurança rolando a página e clicando em “Criar cluster”Botão para concluir o processo:
Depois disso, entre no painel EC2 da plataforma da AWS para validar as instâncias criadas pelo cluster EMR:
Clique no "Grupos de segurança”Página do painel esquerdo e expanda o“AçõesGuia para clicar na “Editar regras de entrada”Botão depois de selecionar o Grupo de Segurança Mestre do EMR:
Adicione uma regra de entrada para selecionar uma porta SSH que possa ser acessível de qualquer lugar da Internet e clique em “Salvar regras" botão:
Repita novamente a etapa anterior com o Grupo de Segurança dos Escravos da EMR, editando regras de entrada:
Selecione a porta SSH que acessará de qualquer lugar e clique em “Salvar regras" botão:
Depois que o cluster EMR for criado, basta clicar no “Ativar uma conexão SSH" link:
Depois disso, comece “Putty”E siga as instruções fornecidas pela plataforma:
Depois que todas as etapas forem concluídas em massa, basta clicar no “Abrir" botão:
O usuário está conectado ao cluster Hadoop com a Amazon EMR:
Você criou e se conectou com sucesso ao cluster Hadoop usando EMR.
Conclusão
Para criar um cluster da Amazon EMR, siga para o painel EMR e clique no “Criar cluster" botão. Definir as configurações do cluster EMR digitando o nome e selecionando o aplicativo Hadoop para o cluster. Depois disso, edite as regras de entrada dos grupos de segurança criados pelo cluster EMR e depois use Putty para se conectar ao cluster.