Engenheiro(a) de Dados Sênior (AWS) – Volpi / DataEX / TCS

Responsável pelo design e evolução da arquitetura de dados em ambientes AWS, incluindo lakehouse, pipelines batch e streaming, e integração com sistemas legados.

Responsabilidades e atribuições

• Desenhar, implementar e evoluir arquiteturas de dados na AWS, com foco em lakehouse.
• Estruturar pipelines de ingestão, transformação e consumo de dados (batch e streaming), utilizando Spark, Databricks, Glue, EMR, Kinesis, Lambda, etc.
• Integrar múltiplas fontes de dados estruturadas e não estruturadas, garantindo qualidade, consistência e rastreabilidade.
• Implementar e otimizar migrações de dados e Change Data Capture (CDC) com AWS DMS ou similares.
• Implantar estratégias de otimização de performance e custo em ambientes cloud.
• Garantir observabilidade, monitoramento, logging e tratamento de falhas em pipelines críticos.
• Construir workflows...