Engenheiro de dados - AWS

Description:

Na Venice, usamos a tecnologia e a inovação para transformar desafios em soluções digitais eficientes. Buscamos profissionais que queiram impactar o futuro com criatividade, explorando novas possibilidades e contribuindo para projetos que fazem a diferença. Se você é curioso, proativo e gosta de desafios, essa pode ser a oportunidade ideal para crescer e evoluir com a gente!

O Engenheiro de dados - AWS é responsável por:

• Projetar e implementar pipelines de dados escaláveis em AWS Glue, Apache Spark e serviços nativos AWS;
• Construir e otimizar arquiteturas de dados distribuídas, aplicando boas práticas de particionamento, compressão e formatos colunares (Parquet, ORC, Iceberg etc.);
• Desenvolver processos de ingestão e transformação de dados em Python e SQL;
• Automatizar fluxos de dados com ferramentas de orquestração (ex.: Airflow, Step Functions, MWAA);
• Aplicar práticas de CI/CD, testes automatizados e versionamento de código (Git) em pipelines de dados;
• Implementar observabilidade em pipelines (logs, métricas, alertas e monitoramento proativo);
• Otimizar performance e custos (FinOps) em pipelines e workloads analíticos.

Requirements:

• Projetar e implementar pipelines de dados escaláveis em AWS Glue, Apache Spark e serviços nativos AWS;
• Construir e otimizar arquiteturas de dados distribuídas, aplicando boas práticas de particionamento, compressão e formatos colunares (Parquet, ORC, Iceberg etc.);
• Desenvolver processos de ingestão e transformação de dados em Python e SQL;
• Automatizar fluxos de dados com ferramentas de orquestração (ex.: Airflow, Step Functions, MWAA);
• Aplicar práticas de CI/CD, testes automatizados e versionamento de código (Git) em pipelines de dados;
• Implementar observabilidade em pipelines (logs, métricas, alertas e monitoramento proativo);
• Otimizar performance e custos (FinOps) em pipelines e workloads analíticos.

Requisitos técnicos

• Experiência sólida em engenharia de dados com foco em AWS (S3, Glue, Athena, EMR, Redshift, Step Functions, Lambda);
• Domínio de Python para processamento e orquestração de dados;
• Conhecimento avançado em SQL e técnicas de modelagem de dados;
• Experiência em arquiteturas distribuídas e Big Data;
• Vivência em CI/CD e boas práticas de engenharia de software aplicadas a dados;
• Diferencial: experiência em formatos colunares, otimização de queries e tuning de performance em ambientes de alto volume.

Benefícios – Modelo PJ | Confidencial (Apenas para Cadastrados)

• Férias remuneradas: 10 dias úteis após 12 meses
• Plataforma Alura com acesso 100% liberado
• TotalPass, com inclusão de até 3 dependentes
• Starbem: até 4 consultas mensais (clínico, nutricionista e psicólogo)
• Clube iFood: R$ 50,00 em cupons + descontos exclusivos
• Avus: até 70% de desconto em consultas e exames e até 80% em farmácias
• Programa de indicação remunerada
• Presente de aniversário
• Cesta de Natal
• Premiação por tempo de casa

Informações Adicionais:

• Contrato PJ
• Pagamento mensal fixo
• Notebook
• Home office
• Horário 09:00 as 18:00