Engenharia de Dados - Pleno (Híbrido SP) - 122499

O que buscamos:

Buscamos uma pessoa Engenheira de Dados Pleno com experiência em PySpark, AWS, Airflow e Iceberg, além de habilidades em integração de dados com CRMs, especialmente Salesforce. Atuação em modelo híbrido no bairro Itaim Bibi, em São Paulo.

 

Requisitos e qualificações:

 

• Experiência prática em AWS, incluindo serviços como S3, Lambda, EMR e Redshift;
• Proficiência em PySpark para processamento de grandes volumes de dados;
• Experiência com Airflow para orquestração de pipelines de dados;
• Sólidos conhecimentos em SQL para manipulação e transformação de dados;
• Experiência com Iceberg para gerenciamento de grandes volumes de dados;
• Vivência com Salesforce ou outros CRMs para integração de dados com sistemas de BI e análise;
• Capacidade de identificar, diagnosticar e resolver problemas em pipelines de dados;
• Experiência com ferramentas como Apache Kafka, RabbitMQ e NiFi para processamento de dados em larga escala;
• Monitoramento e otimização de performance de sistemas de dados.

 

Responsabilidades:

 

• Desenvolver e otimizar pipelines de dados utilizando PySpark para processamento distribuído e transformação de grandes volumes de dados;
• Trabalhar com Airflow para orquestração e automação de processos de dados;
• Projetar soluções de armazenamento e consulta eficientes utilizando Iceberg e AWS, garantindo escalabilidade e integridade dos dados;
• Criar e otimizar consultas SQL para manipulação e análise de dados em diferentes fontes (relacionais e não relacionais);
• Integrar dados de diferentes sistemas, com experiência em CRMs (especialmente Salesforce);
• Colaborar com equipes de dados, negócios e TI para entender requisitos e implementar soluções adequadas;
• Assegurar qualidade, consistência e segurança dos dados, promovendo boas práticas de governança e compliance;

 

 

Descrição comportamental:

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

 

 

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT