Junte-se à Digiage e ajude a escalar a inteligência artificial com excelência operacional.    

Estamos em busca de um(a) Engenheiro(a) de Dados Pleno para integrar um time técnico focado na construção e sustentação de soluções de dados escaláveis em AWS. Esse(a) profissional atuará no desenvolvimento de pipelines de dados, colaborando com arquitetos e engenheiros sêniores, com espaço para aprendizado contínuo e evolução técnica. 

  

Responsabilidades e atribuições:   

• Desenvolver e manter pipelines de dados para ingestão, transformação e disponibilização de dados em larga escala, contemplando processamentos batch e streaming. 

• Criar e otimizar processos ETL/ELT utilizando Apache Spark e Delta Lake, seguindo boas práticas de qualidade e performance. 

• Integrar pipelines de dados com serviços da AWS, como AWS Glue, DynamoDB, Athena, Lambda e SQS. 

• Apoiar o monitoramento e a manutenção da saúde dos pipelines utilizando Amazon CloudWatch, atuando na identificação e resolução de incidentes. 

• Contribuir para a automação da infraestrutura de dados por meio de AWS CloudFormation, com suporte e orientação do time. 

• Aplicar o padrão de ingestão por camadas Medallion (Bronze, Silver e Gold) na organização dos dados analíticos.