Junte-se à Digiage e ajude a escalar a inteligência artificial com excelência operacional.   

Estamos em busca de um(a) Engenheiro(a) de Dados para atuar no desenvolvimento e sustentação de soluções robustas de dados em ambientes de alta escala. Esse profissional fará parte de um time técnico, contribuindo diretamente para a construção de pipelines eficientes, confiáveis e orientados a dados, utilizando tecnologias modernas do ecossistema AWS. 

Responsabilidades e atribuições:  

• Desenvolver, manter e evoluir pipelines de dados para ingestão, transformação e disponibilização de informações em larga escala, contemplando processamentos batch e streaming. 

• Criar, otimizar e manter processos ETL/ELT utilizando Apache Spark e Delta Lake, garantindo performance, qualidade e confiabilidade dos dados. 

• Integrar soluções de dados com serviços da AWS, como AWS Glue, DynamoDB, Athena, Lambda e SQS. 

• Monitorar a execução e a saúde dos pipelines de dados por meio do Amazon CloudWatch, identificando e corrigindo falhas de forma proativa. 

• Automatizar a infraestrutura de dados utilizando AWS CloudFormation, promovendo padronização, escalabilidade e controle de versões. 

• Aplicar o padrão de arquitetura Medallion (Bronze, Silver e Gold) para organização, governança e evolução dos dados analíticos.