O que buscamos

Profissional com experiência em processamento de dados em ambiente cloud, especialmente AWS, com domínio em Spark e Python. A atuação será voltada para desenvolvimento, orquestração e melhoria de processos de dados, com foco em arquitetura moderna e escalável.

Responsabilidades

• Processar e analisar dados utilizando AWS EMR com Spark;
• Utilizar Glue como catálogo de dados;
• Realizar consultas em DynamoDB e Athena;
• Monitorar e identificar erros em execuções no Step Function;
• Desenvolver e manter processos utilizando Python e Spark, especialmente no framework B3;
• Orquestrar e acompanhar processos no Control-M, identificando dependências, melhorias e correções necessárias;
• Utilizar GitHub para versionamento de código e colaboração entre equipes;
• Apoiar na análise de processos criados em SSIS e contribuir na migração de processos OnPrem para AWS;
• Recomendar e implementar melhorias em processos utilizando Iceberg e arquitetura Data LakeHouse (Spark → Iceberg → Dremio);

Requisitos e Qualificações

• Conhecimento em conceito Data Mesh;
• conhecimento em AWS: EMR, Glue (catálogo), DynamoDB/Athena (consultas), Step Function;
• conhecimento em Python e Spark, com foco no framework B3;
• conhecimento em Control-M para orquestração de processos;
• conhecimento em GitHub para versionamento de código;
• conhecimento em banco de dados relacional, incluindo procedures e SSIS;
  
  

Diferenciais

•         Conhecimento em Iceberg e arquitetura Data LakeHouse;

• Desejável experiência com Databricks;

Descrição comportamental:

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT