Pessoa Engenheira de Dados

Qual a missão?

A pessoa engenheira de dados vai atuar no desenvolvimento e otimização de pipelines de dados, garantindo a coleta, processamento e disponibilização eficiente, escalável e segura de dados para consumo analítico e operacional. Contribuir para a evolução da arquitetura Lakehouse da Confidencial (Apenas para Cadastrados), assegurando qualidade, governança e integração entre sistemas.

O que vai fazer no seu dia a dia?

• Desenvolver e otimizar pipelines de dados batch e streaming com autonomia.

• Implementar e manter pipelines utilizando Databricks, Delta Lake, DLT e Databricks Workflows.

• Participar da definição e evolução da arquitetura de dados (Lakehouse).

• Garantir qualidade, segurança e governança dos dados, aplicando boas práticas de modelagem e versionamento.

• Integrar diferentes fontes de dados e apoiar times de Analytics e Ciência de Dados.

• Realizar troubleshooting e análise de problemas complexos em pipelines e processos de dados.

• Propor melhorias contínuas em performance, custo e confiabilidade dos fluxos de dados.

  
  

O que o Confidencial (Apenas para Cadastrados) espera de você?

• Domínio em SQL e Python.

• Vivência com integração de múltiplas APIs e fontes SaaS.

• Conhecimento sólido em arquitetura de dados, especialmente no modelo Lakehouse.

• Capacidade de atuar com autonomia e senso de dono nas entregas.

• Boa comunicação para alinhamento técnico com analistas e cientistas de dados.

• Capacidade analítica para identificar gargalos e propor melhorias estruturais.

  
  

Para ir além:

• Experiência prática com Databricks, Delta Lake, DLT e Databricks Workflows.

• Experiência com streaming estruturado (Structured Streaming).

• Conhecimento em boas práticas de governança de dados (Unity Catalog, controle de acesso, LGPD).

• Experiência com versionamento, CI/CD e infraestrutura como código aplicada a dados.

• Interesse em evoluir continuamente a maturidade técnica da área e contribuir com boas práticas para o time.