Job Description
Descrição:
2x a week to São Carlos Habilidades: Experiência com o ecossistema AWS EMR e Hadoop. Sólida experiência em administração Linux e programação de scripts (Bash, Python).- Familiaridade com serviços da AWS como S3, EC2, IAM e CloudWatch.
- Experiência com Terraform, CloudFormation e outras ferramentas DevOps.
- Certificações AWS (Arquiteto de Soluções, Big Data, Engenheiro de Dados).- Experiência com EMR Serverless, Docker ou Kubernetes.
1. Administração de Cluster EMR:
- Provisionar, configurar e gerenciar clusters do Amazon EMR.
- Otimizar dimensionamento, escalonamento automático e desempenho.
- Gerenciar componentes do Hadoop, incluindo HDFS, YARN, Hive e Spark.
2. Operações da Plataforma de Big Data:
- Instalar, configurar e atualizar ferramentas de big data.
- Monitorar a integridade do cluster e solucionar problemas.