Na Confidencial (Apenas para Cadastrados), acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.
Ao se juntar à Confidencial (Apenas para Cadastrados), você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!
Junte-se a nós e seja parte da mudança!
#LI-REMOTE
#LI-MM1
Responsabilidades e atribuições
Estamos em busca de um Engenheiro de Dados Senior, com ampla experiência em soluções de dados na nuvem AWS, para desenvolvimento e implementação de arquiteturas de dados modernas e escaláveis. O profissional será responsável por construir pipelines de dados robustos, implementar data lakes e data warehouses, além de desenvolver soluções analíticas utilizando o ecossistema AWS, em conjunto com Databricks e Trino, para o processamento distribuído de grandes volumes de dados.
O que esperamos que você realize:
- Projetar e construir pipelines de dados eficientes utilizando AWS Athena, PySpark e Databricks.
- Implementar e gerenciar data lakes no Amazon S3, garantindo estruturas otimizadas.
- Desenvolver queries e análises complexas com Amazon Athena, Trino e Databricks.
- Implementar processos de ETL/ELT para a integração de múltiplas fontes de dados.
- Otimizar a performance de queries e o processamento de dados em larga escala.
- Participar de code reviews e oferecer mentoria técnica para a equipe.
- Colaborar com stakeholders de negócios para traduzir requisitos em soluções técnicas.
- Implementar rotinas de monitoramento e observabilidade dos pipelines de dados.
- Agendar a execução de rotinas de ETL utilizando o Apache Airflow.
Requisitos e qualificações
Requisitos essenciais:
- Experiência avançada em Python e SQL.
- Sólidos conhecimentos em serviços AWS, incluindo:
- Amazon S3 para armazenamento de dados.
- Amazon Athena para consultas serverless.
- Experiência com Trino (anteriormente PrestoSQL) para queries distribuídas.
- Domínio do Databricks e Delta Lake para processamento de dados.
- Experiência com PySpark para processamento de dados em larga escala.
- Conhecimento em modelagem de dados e data warehousing.
- Experiência com particionamento e otimização de performance em data lakes.
- Domínio de versionamento Git e metodologias ágeis (Azure DevOps).
- Experiência com formatos de dados modernos (Parquet, Delta, Iceberg).
Diferenciais:
- Certificações AWS (Data Analytics, Solutions Architect ou Data Engineer).
- Experiência com Apache Airflow para orquestração.
- Experiência com streaming de dados (Kinesis, Kafka).
- Conhecimento em dbt (Data Build Tool) para transformações.
- Experiência com Great Expectations para qualidade de dados.
- Familiaridade com ferramentas de CDC (Change Data Capture).
- Conhecimento em observabilidade e monitoramento (Elastic Search com Kibana).
- Experiência com APIs RESTful.
- Conhecimento em containerização (Docker, Kubernetes).
- Experiência com Terraform ou CloudFormation para Infrastructure as Code (IaC).
Informações adicionais
O que te oferecemos:
🍛 Vale Alimentação ou Vale Refeição;
👨🏼🎓 Desconto em cursos, universidades e instituições de idiomas;
📚 Academia Confidencial (Apenas para Cadastrados) - plataforma com cursos online, gratuitos, atualizados e com certificado;
🗣 Mentoring;
🏫 Auxílio Creche;
💉 Clube de vantagens para consultas e exames;
🏥 Assistência Médica;
🦷Assistência Odontológica;
💰 Clube de vantagens e descontos nos melhores estabelecimentos;
🛫 Clube de viagens;
🐶 Convênio para Pet;
e muito mais...
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Fit Cultural
- Etapa 3: Bate papo com Gente & Cultura
- Etapa 4: Bate papo com Gestão
- Etapa 5: Carta proposta
- Etapa 6: Contratação
Confidencial (Apenas para Cadastrados): Acreditar para Cocriar 🌟
Na Confidencial (Apenas para Cadastrados), a inovação não é apenas uma meta; é uma jornada que trilhamos juntos, onde a colaboração se torna a essência da transformação. 🤝 Com 37 anos de história e uma presença global em mais de 40 países, contamos com uma equipe de 38 mil talentos apaixonados, prontos para transformar desafios em oportunidades por meio da tecnologia. 💡
Acreditamos que cada projeto é uma oportunidade e que, juntos, podemos moldar um futuro mais ágil, eficiente e conectado. Nossa missão vai além de oferecer soluções: buscamos cocriar com nossos clientes, integrando inteligência artificial e tecnologias emergentes para revolucionar o cotidiano das empresas. 🌍✨
Aqui, cada voz conta e cada ideia tem o poder de impactar. Valorizamos a humildade, o respeito, o comprometimento e a coragem, construindo uma cultura onde a inovação floresce. Aqui, liderar é dar o exemplo, e é por isso que inspiramos um ambiente dinâmico onde tecnologia e talento se complementam.
Se você sonha grande, tem coragem de desafiar o convencional e quer fazer parte de uma equipe que acredita no poder da cocriação, junte-se a nós! Vamos, juntos, acreditar e cocriar um futuro brilhante, onde cada passo representa uma nova conquista!🚀✨