Job Description
Job description
#Conheça um pouco sobre a área:
Estamos à procura de um Data Engineer para integrar nosso time de Dados. O profissional será responsável por desenvolver e manter pipelines de dados robustos e escaláveis, garantir a qualidade e a integridade dos dados, além de colaborar com diferentes equipes para fornecer soluções de dados eficientes. Se você tem paixão por dados, habilidades técnicas avançadas e experiência com grandes volumes de dados, queremos conhecer você!
Main responsibilities
#Desafios que você vai encontrar:
- Desenvolver, manter e otimizar pipelines de dados utilizando Apache Spark.
- Implementar e gerenciar soluções de dados na plataforma Databricks.
- Implementar e gerenciar soluções de orquestração de pipeline de dados na plataforma Apache Airflow.
- Projetar e implementar arquitetura de dados na AWS, utilizando serviços como S3, RDS, DynamoDB, ECS, EKS, Glue, L...