Data Engineer | Remota - 135416 INT
Data Engineer | Remota - 135416 INT
Alphaville - Barueri, BR, 06.454-000
O que buscamos
Buscamos um(a) profissional com experiência em engenharia e modelagem de dados, capaz de desenvolver e otimizar soluções analíticas, garantindo qualidade, governança e integridade dos dados. A pessoa atuará em colaboração com áreas de negócio e times técnicos para transformar necessidades corporativas em soluções escaláveis de dados, integrando diferentes fontes, serviços e APIs.
Responsabilidades
- Atuar na modelagem e desenho de estruturas de dados eficientes para consultas analíticas, assegurando desempenho, escalabilidade e integridade dos dados;
- Garantir a governança, qualidade, segurança e conformidade dos dados de acordo com normas, políticas e regulamentações aplicáveis;
- Implementar e sustentar práticas de governança de dados visando a padronização e confiabilidade das informações;
- Colaborar com stakeholders para entender necessidades de negócio e traduzir requisitos em soluções técnicas de dados;
- Otimizar pipelines de dados para melhorar a performance de processos analíticos e relatórios;
- Integrar dados provenientes de diferentes fontes, sistemas, serviços e APIs para geração de insights e suporte à tomada de decisão;
- Desenvolver, manter e aprimorar workflows e processos de engenharia de dados utilizando ferramentas e frameworks do ecossistema de dados;
- Realizar análises de desempenho e otimização de ambientes de banco de dados;
Requisitos e Qualificações
- Experiência avançada com Python aplicado a soluções de dados;
- Conhecimento em bibliotecas de manipulação e processamento de dados, como Pandas;
- Experiência com Apache Airflow para criação e manutenção de DAGs;
- Conhecimento em integração entre Airflow e dbt-core;
- Experiência com dbt-core para desenvolvimento e manutenção de modelos e macros;
- Vivência na migração de códigos SQL para DBT;
- Conhecimento em Git e práticas de versionamento e implantação de código;
- Conhecimento avançado em SQL Server, incluindo performance tuning, otimização e análise de desempenho;
- Familiaridade operacional com arquitetura Medallion;
- Conhecimentos em análise de dados e modelagem de dados de negócio;
- Conhecimento em proteção de dados, governança e compliance.
Diferenciais
- Experiência em projetos de integração de múltiplos serviços e APIs;
- Vivência em iniciativas de governança de dados corporativos;
- Experiência em ambientes analíticos de grande volume de dados;
- Conhecimento de processos relacionados a gestão de riscos, requisitos regulatórios e compliance de dados.