* Salário: R$ 11.000 a R$ 20.000 por mês (estimado)
* O valor exibido é uma estimativa calculada com base em dados públicos e referências do mercado. Não garantimos que este seja o salário oferecido para esta vaga específica.
Área: Tecnologia da Informação
Nível: Senior
NOSSO NEGÓCIO
Aqui na Confidencial (Apenas para Cadastrados), aceleramos grandes ideias com inovação e tecnologia. Com uma trajetória de mais de 30 anos, o que nos move são os desafios em construir ideias em soluções reais, para que nossos clientes sejam referências no segmento que atuam.
Especialistas em desenvolvimento de software e inteligência de dados, temos uma relação de transparência, confiança, credibilidade e reconhecimento neste mercado.
Nosso maior sonho? Impactar empresas e pessoas.
O QUE ESPERAMOS DE VOCÊ?
Estamos buscando um Engenheiro de Dados Databricks para integrar nossa equipe de engenharia de dados.
Nesta função, você será responsável por desenvolver, manter e evoluir pipelines de dados e soluções analíticas na plataforma Databricks Unified Analytics, apoiando cientistas de dados, analistas e demais áreas de negócio na tomada de decisão baseada em dados.
RESPONSABILIDADES:
- Desenvolver e manter pipelines de dados ETL/ELT no Databricks, utilizando PySpark, SQL e Delta Lake.
- Contribuir na otimização e monitoramento dos fluxos de dados, utilizando Jobs, Workflows e notebooks Databricks.
- Realizar integração, limpeza e transformação de dados estruturados e não estruturados provenientes de diferentes fontes (armazenamento em nuvem, APIs, bancos relacionais, etc.).
- Implementar validações e controles de qualidade de dados.
- Apoiar o time na modelagem e estruturação de dados, colaborando com analistas e stakeholders.
- Auxiliar no gerenciamento e execução de pipelines com ferramentas como Databricks Workflows ou Airflow.
- Seguir boas práticas de segurança, governança e rastreabilidade de dados (ex.: Unity Catalog, permissões por função).
- Documentar processos e contribuir para melhorias contínuas da plataforma de dados.
PARA ESSA OPORTUNIDADE VOCÊ PRECISA TER:
- Experiência prática em engenharia de dados, com atuação em projetos utilizando Databricks.
- Conhecimento sólido em PySpark, SQL e processamento distribuído de dados.
- Experiência com Python para automação e integração de dados.
- Entendimento dos conceitos de Delta Lake e arquitetura Lakehouse.
- Experiência em ambientes de nuvem (AWS, Azure ou GCP).
- Familiaridade com Git e práticas de versionamento de código.
- Noções de pipelines CI/CD.
- Conhecimento básico ou experiência inicial com Snowflake.
- Compreensão de formatos de dados modernos (Parquet, Avro, JSON).
- Boa capacidade de análise e resolução de problemas técnicos.
- Inglês avançado para conversação.
- Certificação Databricks (ex.: Databricks Certified Data Engineer Associate/Professional) é desejável.
SERIAM PONTOS DE DESTAQUE SE VOCÊ TIVER:
- Experiência com Unity Catalog, Databricks SQL ou integrações Partner Connect.
- Familiaridade com Airflow, Docker, Terraform ou conceitos de DevOps.
- Experiência com ferramentas de BI (Tableau, Power BI, Looker).
- Interesse ou exposição a pipelines de machine learning (MLOps) no Databricks.
PARA UMA VIDA MAIS SAUDÁVEL, TE PROPORCIONAMOS:
- Política de Home Office
- Plano de saúde, com cobertura nacional
- Plano odontológico
- Convênio com Sesc
- Wellhub
TE APOIAMOS COM:
- Vale refeição ou alimentação
- Auxílio creche
- Participação nos resultados
- Licença parental estendida
- Plano de desenvolvimento individual/anual com subsídio para capacitação
- Treinamento do idioma inglês
- Programa de intercâmbio (USA)
Nossas vagas são para todos! Valorizamos a diversidade, pois ela impulsiona a inovação, fortalece nossas soluções e torna nosso ambiente mais inclusivo. Cada diferença é uma oportunidade de aprendizado, tornando nosso dia a dia mais inspirador e nossas entregas ainda melhores.