Data Engineer SR - Databricks

Descrição da vaga

Somos uma consultoria de marketing e tecnologia que utiliza ciências exatas para melhorar a relação entre marcas e pessoas. Combinamos nossas diversas experiências, equipes, tecnologia e processos testados em mais de 200 marcas, 20 países e milhões de pessoas impactadas para decodificar desafios.

Data Engineer

Missão: Gerar insights para os clientes, através de atividades e processos de baixa/média complexidade, garantindo sua integridade e segurança, e colaborando com as equipes para impulsionar a tomada de decisões e a inovação.

Atividades:

Integração de Dados: Executar o processo de integração e automatização de alta/crítica complexidade, desenvolvendo pipelines que coletam, limpam, transformam, organizam e integram dados de múltiplas fontes, através de linguagens de programação, ETL e outras ferramentas específicas, visando assegurar a qualidade, clareza e consistência dos dados integrados.

Modelagem de Dados: Executar a estruturação lógica e organização de dados de alta/crítica complexidade, aplicando técnicas de modelagem de acordo com as melhores práticas, através de ferramentas e linguagens específicas de modelagem de dados, com o objetivo de gerar insights para análises e garantir uma organização precisa e manipulação eficiente dos dados.

Análise de Dados: Extrair, analisar e gerar relatórios, com base no levantamento de dados de alta/crítica complexidade, ferramentas específicas, propondo insights para tomadas de decisão, visando focar na disponibilidade, escalabilidade e desempenho das aplicações.

Documentação Técnica: Elaborar documentação técnica para o cliente, através de modelos estabelecidos, visando facilitar a compreensão e utilização das soluções pelos clientes.

Análise de Negócio: Colaborar diretamente com o cliente na análise e levantamento de necessidades e requisitos específicos, visando desenhar e planejar a execução de processos de ETL alinhados com os objetivos estratégicos da empresa.

Melhoria Contínua: Identificar e propor soluções de melhorias e inovações dentro das ferramentas e processos, visando garantir qualidade nas entregas com mais agilidade.

Tech Skills (Intermediário) :

• ETL com foco na criação de pipelines de dados
• SQL (avançado)
• Python para manipulação de dados (pandas, PySpark, etc.)
• Databricks
• Git (GitHub/Gitlab)
• Data visualization (Power BI)
• Plataformas de nuvem: Databricks e Azure
• Experiência em análise de dados (criação de dashboards, modelagem de dados e geração de insights)

Nossos benefícios:

Nossos Valores: #InnovaMathers #CollabMathers #TrueMathers #HumanMather