Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis.
Local
Campinas - SP
Presencial
Responsabilidades
- Avaliar respostas de modelos, identificar alucinações, monitorar comportamentos em produção, curar bases de conhecimento e garantir princípios de IA Responsável.
Requisitos
- Experiência com testes, avaliação ou garantia de qualidade em sistemas de software ou dados; Familiaridade com conceitos de IA Generativa, LLMs e RAG; Conhecimento de Python para automação de avaliações e análise de dados de qualidade; Habilidade de comunicação clara para reportar problemas e recomendar melhorias a perfis técnicos e não-técnicos; Organização e disciplina para documentar processos, incidentes e decisões de forma consistente; Conhecimento de princípios de IA Responsável, ética em IA e LGPD/GDPR.
Diferenciais
- Experiência com ferramentas de avaliação de LLMs como Azure AI Evaluation, Promptflow Evaluators, RAGAS ou TruLens; Conhecimento de Azure AI Foundry e seus recursos de monitoramento e avaliação; Familiaridade com Azure AI Search e estratégias de indexação para RAG; Experiência com Microsoft Copilot Studio do ponto de vista de testes e validação; Noções de Prompt Engineering para diagnóstico e ajuste fino de comportamentos dos modelos; Experiência prévia em setores regulados (financeiro, saúde, jurídico).
Sobre a empresa
Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 8,000 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1,000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.
Informações Adicionais
- Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.
Inclusão
- Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo. Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.