Engenharia de Dados - 122470

Responsabilidades:

• Coletar, limpar e transformar dados brutos em formatos utilizáveis para análise.

• Desenvolver e manter pipelines de dados eficientes e escaláveis.

• Configurar, gerenciar e modelar bancos de dados relacionais (SQL), não relacionais (NoSQL) e data warehouses.

• Trabalhar em conjunto com times de análise para fornecer insights acionáveis.

• Monitorar e otimizar o desempenho dos sistemas de dados.

• Seguir e disseminar boas práticas e padronizações dentro da equipe.

• Participar de reuniões de definição e planejamento técnico.

• Atuar ativamente na identificação e mitigação de riscos e problemas nos sistemas de dados.

Requisitos Imprescindíveis:

✅ Plataformas & Ferramentas: Conhecimento avançado em Databricks e ferramentas Azure (Azure Data Factory, Azure Databricks, ADLS, EventHub etc.).
✅ Linguagens & Formatos: Programação em Python e uso de Parquet.
✅ Governança de Dados: Compreensão, conceito e proposição de Governança de Dados e Domínio de Dados na visão do negócio.
✅ Data Lake: Experiência com desenvolvimento em zonas de Data Lake (Bronze, Silver e Gold) e entendimento do conceito de Delta Table.
✅ Banco de Dados: Proficiência em bancos relacionais e não relacionais, incluindo técnicas de otimização e tuning.
✅ DevOps: Capacidade de seguir padrões de trabalho voltados para DevOps.
✅ Experiência comprovada em projetos de engenharia de dados.

Requisitos Desejáveis:

�� Certificações Azure, como Microsoft Certified: Azure Data Engineer Associate.
�� Certificação Databricks de nível avançado (Data Engineer Associate ou Professional).
�� Bom conhecimento com bancos de dados NoSQL (Cassandra, CosmosDB, etc.).
�� Experiência com plataformas de streaming de eventos (EventHubs, Kafka).
�� Histórico de liderança técnica em projetos.