Caro usuário, habilite o javascript para que esse site funcione corretamente.

Engenheiro de Dados Pleno/Sênior - Spark | Delta Lake | Databricks | Migração de ETLs (SAS → Spark)

CLT (Efetivo)Presencial (Local)São Paulo-SPEmpresa Confidencial (Cadastre-se)

* Salário: R$ 11.000 a R$ 20.000 por mês (estimado)

* O valor exibido é uma estimativa calculada com base em dados públicos e referências do mercado. Não garantimos que este seja o salário oferecido para esta vaga específica.

Área: Tecnologia da Informação

Nível: Senior

Engenheiro(a) de Dados Pleno/Sênior
Spark | Delta Lake | Databricks | Migração de ETLs (SAS Spark)

Espanhol Avançado/Fluente

Estamos em busca de um(a) Engenheiro(a) de Dados Pleno/Sênior para atuar em um projeto estratégico de modernização de dados, com foco na migração de processos SAS para Databricks e na construção de pipelines robustos, escaláveis e performáticos.
Se você possui sólida experiência com Spark, arquitetura moderna de dados e gosta de atuar em ambientes desafiadores e de alto impacto, essa oportunidade é para você.

Informações adicionais
  • Modelo de atuação: Híbrido – idas esporádicas ao escritório até 2 dias na semana (Zona Sul de SP – região da Berrini)
  • Modelo de contratação: PJ
  • Necessário possuir equipamento próprio

Requisitos Técnicos

Espanhol Avançado/Fluente

Processamento de Dados
  • Experiência avançada com Apache Spark
  • Conhecimento sólido em Delta Lake
  • Vivência prática com Databricks

Orquestração
  • Criação e gestão de Jobs, Tasks e parametrizações
  • Experiência com Delta Live Tables (DLT)
  • Integração com Airflow ou APEX

Desenvolvimento e Governança
  • Versionamento com Git
  • Gestão de ambientes (dev, homologação e produção)
  • Experiência com DBX (desejável)

Operação e Performance
  • Monitoramento de logs e métricas
  • Otimização de custos no Databricks
  • Estratégias de particionamento e otimização de arquivos
Principais Responsabilidades
  • Migrar ETLs complexos de SAS para Databricks (Spark)
  • Traduzir códigos PROC SQL e Macros SAS para notebooks e jobs em Spark
  • Integrar dados provenientes de múltiplas fontes
  • Desenvolver pipelines escaláveis, automatizados e resilientes
  • Estruturar modelos de dados compatíveis com Data Cloud
  • Garantir qualidade, governança e segurança dos dados
  • Atuar na ativação de dados para Marketing, IA e personalização
  • Monitorar performance, custos e disponibilidade dos ambientes
  • Colaborar com times multidisciplinares (dados, negócio, marketing e tecnologia)