Conceito
Eval
Teste automático que mede a qualidade das respostas de um modelo ou agente contra casos com resposta esperada conhecida.
O portal ensina Eval em 14 capítulos de 10 cursos gratuitos.
Definição do Glossário DEV Full-Stack (ver o verbete).
Onde estudar
Onde o termo é definido
O capítulo do glossário que dá a definição.
Capítulos que usam o termo
O termo aparece escrito no texto da aula.
- Software e IA para executivosUma política de IA que passa na auditoria
- Frontends com VibecodingConfigurar ambiente, skills e o contêiner de contexto
- Frontends com VibecodingValidar desempenho, autenticação e segurança
- Vídeo com IA: do roteiro à publicaçãoInstale receitas de produção reutilizáveis no Claude Code
Capítulos que tratam do tema
A aula trata do assunto mesmo sem escrever o nome do termo.
- Prompt Engineering para ExecutivosTestar a IA com 20 a 50 casos reais antes de liberar
- Modelo de trabalho com agentes de IAO que os testes mostram e o que deixam de fora?
- Modelo de trabalho com agentes de IAComo acompanhar o agente depois da publicação?
- Avaliar e melhorar agentesEncontrar o que os testes ainda não cobrem
- Agentes de IA autônomos: como delegar e acompanharTestes e avaliação: que evidências permitem aprovar um piloto
- RAG: IA apoiada em documentosLocalizar a etapa que produziu o erro
- Modelo de trabalho com agentes de IAComo avaliar testes escritos por um agente?
- Segundo cérebro com IAComo avaliar um teste de memória antes de escolher a ferramenta
- Python do zeroClassificar consultas com IA e conferir as respostas
- Avaliar e melhorar agentesPedir evidências antes de assinar
Em quais cursos aparece
Capítulos que definem, usam ou tratam do termo e mídias que o citam, contados por curso.
- Modelo de trabalho com agentes de IA3 capítulos
- Avaliar e melhorar agentes2 capítulos
- Frontends com Vibecoding2 capítulos
- Agentes de IA autônomos: como delegar e acompanhar1 capítulo
- Prompt Engineering para Executivos1 capítulo
- Python do zero1 capítulo
- RAG: IA apoiada em documentos1 capítulo
- Segundo cérebro com IA1 capítulo
- Software e IA para executivos1 capítulo
- Vídeo com IA: do roteiro à publicação1 capítulo
Onde aparece nas vídeo-aulas
Vídeo-aulas e podcasts dos cursos, com o instante em que o assunto surge. Cada horário abre o player naquele ponto. Transcrição de fala sintética gerada por IA a partir do texto do capítulo.
A fala cita o termo
O narrador diz Eval (ou o plural) nestes instantes.
Termos próximos
Termos com sentido parecido com Eval, pela comparação dos embeddings (a representação numérica do sentido de cada termo) calculados no build. É uma aproximação por sentido, não uma afirmação do autor.
Como esta página foi montada
As ligações saem do texto das aulas, recalculado a cada publicação do site. Os critérios de cada tipo de ligação:
- O capítulo do glossário em que o termo é definido.
- O termo aparece escrito no capítulo ao menos duas vezes; os 10 de maior TF-IDF por capítulo.
- O capítulo trata do tema sem escrever o termo: cosseno de ao menos 0.58 entre os embeddings (text-embedding-3-small, 512 dimensões), no máximo 3 por capítulo.
- O termo aparece ao menos duas vezes na transcrição da mídia; os 8 de maior TF-IDF por mídia, com a raridade medida nos capítulos.
- Os dois termos aparecem juntos em ao menos 3 capítulos, com coocorrência normalizada (NPMI) acima de 0,1.
- Capítulos de cursos diferentes com cosseno de ao menos 0.5 entre os embeddings (os 5 mais próximos) e cursos com cosseno de ao menos 0.45 entre as médias. Conceitos com vizinhança mútua: cada um está entre os 4 mais próximos do outro, com cosseno de ao menos 0,6 entre os embeddings já gravados no build; o conceito que ficaria sem vizinho conceito liga ao mais próximo com cosseno de ao menos 0,55 que não divide capítulo com ele. Sem nova chamada à API.