Especialista em QA / Testes de IA

Vaga: Especialista em QA / Testes de IA

Estamos em busca de profissional com experiência em validação de sistemas de IA, agentes conversacionais e fluxos multicanais, incluindo voz e texto.

Requisitos e Experiência

• Experiência em estratégia e execução de testes para soluções de IA
• Vivência com validação de RAG e avaliação de respostas de LLMs
• Conhecimento em testes estatísticos aplicados à IA
• Experiência com critérios de aceite, rastreabilidade de bugs e qualidade conversacional
• Familiaridade com orquestração de agentes e fluxos complexos

Tecnologias e Conhecimentos

• LangFuse
• Frameworks Judge / Supervisor
• RAG
• LLMs
• Ferramentas de QA
• Dashboards de qualidade

Principais Atividades

• Definir framework de testes para agentes de IA
• Validar qualidade e comportamento dos agentes
• Orientar parceiros sobre melhores práticas de QA
• Estruturar métricas e indicadores de qualidade
• Revisar cobertura de testes e critérios de aceite
• Apoiar validação de fluxos conversacionais complexos

Modelo de Trabalho
Remoto

Informações Adicionais

• Atuação eventual em finais de semana durante janelas críticas ou go-live
• Português fluente obrigatório
• Necessário conhecimento em testes de orquestração de agentes e fluxos complexos

Nível
Pleno/Senior ou Senior

Previsão de Projeto
Até dezembro/2026

Início
Imediato

Interessados podem encaminhar currículo atualizado para:
jfranca@ataway.com