QA de IA SR - RHA1848

O que esperamos dessa pessoa

• Garantir qualidade das soluções de IA antes e após o deploy

• Reduzir erros e inconsistências dos agentes

• Aumentar confiabilidade das respostas

• Apoiar evolução contínua dos modelos

Buscamos um profissional que:

• Questione e valide o comportamento dos agentes

• Tenha olhar crítico sobre respostas de IA

• Garanta qualidade real das soluções entregue

Mentalidade (ESSENCIAL)

• Perfil crítico e detalhista

• Capacidade de questionar resultados

• Foco em qualidade e confiabilidade

• Organização e clareza na comunicação

• Mentalidade de melhoria contínua

QA de IA (AI Quality & Evaluation Engineer)

Sobre a vaga

Buscamos um profissional focado em qualidade de soluções de Inteligência Artificial, responsável por

validar, testar e garantir a consistência de agentes de IA em produção.

Essa posição é voltada para alguém com perfil analítico e crítico, capaz de avaliar não apenas aspectos

técnicos, mas também a qualidade semântica das respostas dos modelos.

Importante: buscamos profissionais com experiência prática em testes de sistemas ou validação de

soluções digitais. Perfis sem capacidade analítica ou foco em qualidade não serão considerados.

Responsabilidades

• Testar agentes de IA em diferentes cenários reais

• Validar qualidade, consistência e coerência das respostas

• Identificar falhas, alucinações e comportamentos inconsistentes

• Criar cenários de teste e casos de uso reais

• Definir critérios de qualidade para respostas dos modelos

• Apoiar na evolução contínua das soluções com feedback estruturado

• Trabalhar em conjunto com AI Engineers para ajustes e melhorias

• Garantir confiabilidade das soluções em ambiente de produção

Stack Esperada / Tecnologias

IA / LLMs

• Conhecimento em funcionamento de LLMs

• Noções de prompt engineering

• Familiaridade com agentes de IA

Testes / Qualidade

• Criação de casos de teste

• Testes funcionais e exploratórios

• Validação de fluxos e comportamento

Ferramentas (diferencial)

• Ferramentas de LLM evaluation

• Ferramentas de acompanhamento (Jira, etc.)

• Experiência com testes de sistemas ou validação de aplicações

• Forte capacidade analítica e senso crítico

• Capacidade de identificar inconsistências e falhas

• Organização para estruturar cenários de teste

• Atenção a detalhes

Diferenciais

• Experiência com avaliação de modelos de IA

• Experiência com produtos digitais ou sistemas em produção

• Conhecimento em dados ou análise

• Experiência com automação de testes

Quer saber mais sobre a gente e fazer parte do time que está construindo o futuro?

#VemSerSpreader

Transformando o mundo com tecnologia

Somos quase 2.500 Spreaders, espalhados em 22 estados brasileiros através do Spread Anywhere, que nos permite trabalhar de forma100% remota, dependendo do modelo de contrato. Somos digitais, hiperconectados e de onde estivermos colocamos em prática todos os dias um dos valores tão presentes na nossa cultura, que é a #colaboração.

Inovação para desenvolver o futuro

A Spread é uma empresa de inovação com 41 anos de história, oferecendo soluções completas em tecnologia e negócios digitais. Atualmente, contamos com um portfólio robusto de serviços, que inclui o desenvolvimento de aplicações, Quality Assurance, IT Outsourcing, Talent on Demand, além do desenvolvimento de soluções em Inteligência Artificial e consultoria e implementação em SAP e S/4HANA. Atuamos com uma abordagem customer centric, onde a experiência do cliente é prioridade e orienta nossas ações e estratégias. Esse compromisso se reflete em nosso NPS de 75 pontos, um indicador que nos posiciona na zona de qualidade e comprova a confiança e a satisfação dos nossos clientes.

Diversidade, Equidade & Inclusão

Aqui a diversidade e inclusão não é apenas uma palavra, mas sim um compromisso genuíno. Trabalhamos para fazer com que todas as pessoas Spreaders se sintam valorizadas, respeitadas e capacitadas para alcançar o pleno potencial. Reconhecemos que a verdadeira diversidade vai além de questões superficiais e abrange uma ampla gama de características, como gênero, etnia, orientação sexual, idade e habilidades.