Engenheiro/Engenheira de Dados Especialista
São Paulo, SP, BR
⚠️ We'll shut down after Aug 1st - try foo🦍 for all jobs in tech ⚠️
Capgemini
A global leader in consulting, technology services and digital transformation, we offer an array of integrated services combining technology with deep sector expertise.Você é apaixonado(a) por tecnologia, inovação e quer fazer parte de um ambiente inclusivo, colaborativo e em constante evolução? Então essa oportunidade é para você!
Na Capgemini, valorizamos o equilíbrio entre vida pessoal e profissional. Por isso, oferecemos modelos de trabalho flexíveis, que podem variar entre home office, híbrido ou presencial, de acordo com as necessidades do projeto. Nosso objetivo é proporcionar a melhor experiência para você, respeitando seu estilo de vida e promovendo bem-estar.
Estamos em busca de Engenheiro/Engenheira de Dados Especialista para compor nosso time.
Responsabilidades:
- Projetar, desenvolver e otimizar pipelines de dados em ambientes distribuídos utilizando Databricks.
- Realizar tuning de performance em workloads de Big Data, garantindo eficiência e escalabilidade.
- Gerenciar dados com Delta Lake, assegurando integridade transacional (ACID) e versionamento.
- Integrar Databricks com arquiteturas híbridas de dados, utilizando Spark, SQL, Python e Scala.
- Colaborar com equipes multifuncionais para entender requisitos de dados e propor soluções técnicas robustas.
- Atuar como referência técnica, mentorando engenheiros juniores e plenos.
- Garantir boas práticas de modelagem de dados, governança e segurança.
Requisitos Técnicos
- Graduação em Ciência da Computação ou áreas correlatas.
- Pós-graduação e/ou certificações específicas serão considerados diferenciais.
- Experiencia em engenharia de dados com foco em soluções de grande escala.
- Experiência comprovada com Databricks.
- Vivência prática com Delta Lake e transações ACID.
- Experiência com Apache Spark, SQL, Python e Scala.
- Experiencia com Azure.
- Conhecimento em arquitetura de dados distribuída e pipelines ETL.
- Conhecimento em performance de dados
- Proficiência em Databricks Jobs, Clusters, Notebooks e MLflow.
- Experiência com ferramentas como Apache Kafka, Azure Data Factory, Airflow é um differencial.
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: Airflow Azure Big Data Databricks ETL Kafka MLFlow Pipelines Python Scala Spark SQL
More jobs like this
Explore more career opportunities
Find even more open roles below ordered by popularity of job title or skills/products/technologies used.