Data Engineer AWS/Databricks - PL
São Paulo, Brazil
Keyrus
Keyrus is a global consultancy that specializes in developing innovative data and digital technology solutions for performance management. We help companies like yours get the most value possible from their data while optimizing their digital...A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa.
Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco.
Papéis e Responsabilidades:
Desenvolver e manter pipelines de dados utilizando Databricks (PySpark) para ingestão, transformação e carregamento de dados.
Implementar e otimizar soluções de processamento de dados em larga escala na nuvem AWS.
Garantir a qualidade, integridade e confiabilidade dos dados, aplicando testes e monitoramento adequados.
Colaborar com arquitetos de dados e outros engenheiros para definir e implementar soluções de dados eficientes e escaláveis.
Participar de reuniões com o time europeu para alinhamento e discussão sobre o projeto, utilizando o inglês como idioma de comunicação.
Qualificações Essenciais:
Sólida experiência em desenvolvimento de pipelines de dados utilizando PySpark e a plataforma Databricks.
Profundo conhecimento de serviços de dados da AWS, como S3, EC2, Glue, EMR, Lambda.
Experiência com linguagens de programação como Python e SQL.
Conhecimento de modelagem de dados e conceitos de Data Warehousing e Data Lakes.
Inglês avançado, com capacidade de comunicação clara e eficaz em reuniões e discussões técnicas.
Qualificações Desejáveis:
Experiência com ferramentas de orquestração de workflow como Apache Airflow ou AWS Step Functions.
Conhecimento de práticas DevOps, como CI/CD e automação de infraestrutura.
Certificações em AWS.
Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade.
Vem fazer parte do Time Keyrus!
Se você quiser saber mais sobre nós, convidamos você a visitar nosso site: http://www.keyrus.com/br/
Desejamos boa sorte! 😊🚀
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: Airflow AWS CI/CD Databricks Data Warehousing DevOps EC2 Lambda Pipelines PySpark Python SQL Step Functions
More jobs like this
Explore more career opportunities
Find even more open roles below ordered by popularity of job title or skills/products/technologies used.