* Salário: R$ 11.000 a R$ 20.000 por mês (estimado)
* O valor exibido é uma estimativa calculada com base em dados públicos e referências do mercado. Não garantimos que este seja o salário oferecido para esta vaga específica.
Área: Tecnologia da Informação
Nível: Senior
Vem ser Confidencial (Apenas para Cadastrados)!
Estamos em busca de uma ou um Engenheiro de Dados On-premises SR para compor nosso time!
📍Modelo de contratação: CLT (Regime Exclusivo)
💻Atuação:REMOTA
🧠 Requisitos obrigatórios:
- Implementação e otimização de soluções de processamento distribuído de dados com Spark.
- Experiência com definição, implementação e manutenção de pipelines de dados robustos e escaláveis ETL/ELT, em cenários de big data e ambientes on-premises.
- Experiência com modelagem, otimização e implementação de estruturas de armazenamento de dados: data lake, data warehouse.
- Implementação de orquestração de pipelines de dados com Airflow.
- Domínio de Python e SQL para consulta e manipulação de dados.
- Experiência com definição e implementação de regas de data quality.
🌟 Diferencial que valorizamos:
- Experiência com soluções de dados em nuvem AWS, Azure ou GCP
🌟 Tecnologias obrigatórias:
- Armazenamento: MinIO
- Data Lake: Delta, Iceberg, Trino, Nessie
- Data Quality: Great Expectations
- Ingestão: Apache Hop, Apache NiFi
- Processamento distribuído: Apache Spark
- Orquestração: Apache Airflow
- Conteinerização: Docker, Kubernetes
- Bancos de dados relacionais: SQL Server, PostgreSQL
- Linguagens: Python, PySpark e SQL