Conceito
Pass Rate
É a nota que o modelo tira no teste. Percentual de casos do eval que atenderam ao critério, comparável só entre rodadas com o dataset congelado. Confira se o seu ficou parado.
O portal ensina Pass Rate em 10 capítulos de 7 cursos gratuitos.
Definição do Glossário DEV Full-Stack (ver o verbete).
Onde estudar
Onde o termo é definido
O capítulo do glossário que dá a definição.
Capítulos que tratam do tema
A aula trata do assunto mesmo sem escrever o nome do termo.
- Avaliar e melhorar agentesConferir a entrega antes de aceitar uma nota
- CRO: Otimização de Conversão e ExperimentaçãoAntes de aprovar o vencedor: seis checagens de validade
- Avaliar e melhorar agentesReconhecer quando a nota melhora e o trabalho piora
- Letramento em IA para ExecutivosConfira a prova antes de levar a resposta à reunião
- Segundo cérebro com IAComo avaliar um teste de memória antes de escolher a ferramenta
- RLM: grandes acervosComo ler resultados de pesquisa com critério
- Agentes de IA autônomos: como delegar e acompanharTestes e avaliação: que evidências permitem aprovar um piloto
- SEO e GEO para quem decideEtapa 6: medir com grupo de controle e decidir
- CRO: Otimização de Conversão e ExperimentaçãoCUPED e CUPAC: testes mais curtos sem perder rigor
- Avaliar e melhorar agentesConferir a passagem do piloto para o uso real
Em quais cursos aparece
Capítulos que definem, usam ou tratam do termo e mídias que o citam, contados por curso.
- Avaliar e melhorar agentes3 capítulos
- CRO: Otimização de Conversão e Experimentação2 capítulos
- Agentes de IA autônomos: como delegar e acompanhar1 capítulo
- Letramento em IA para Executivos1 capítulo
- RLM: grandes acervos1 capítulo
- Segundo cérebro com IA1 capítulo
- SEO e GEO para quem decide1 capítulo
Termos próximos
Termos com sentido parecido com Pass Rate, pela comparação dos embeddings (a representação numérica do sentido de cada termo) calculados no build. É uma aproximação por sentido, não uma afirmação do autor.
Como esta página foi montada
As ligações saem do texto das aulas, recalculado a cada publicação do site. Os critérios de cada tipo de ligação:
- O capítulo do glossário em que o termo é definido.
- O termo aparece escrito no capítulo ao menos duas vezes; os 10 de maior TF-IDF por capítulo.
- O capítulo trata do tema sem escrever o termo: cosseno de ao menos 0.58 entre os embeddings (text-embedding-3-small, 512 dimensões), no máximo 3 por capítulo.
- O termo aparece ao menos duas vezes na transcrição da mídia; os 8 de maior TF-IDF por mídia, com a raridade medida nos capítulos.
- Os dois termos aparecem juntos em ao menos 3 capítulos, com coocorrência normalizada (NPMI) acima de 0,1.
- Capítulos de cursos diferentes com cosseno de ao menos 0.5 entre os embeddings (os 5 mais próximos) e cursos com cosseno de ao menos 0.45 entre as médias. Conceitos com vizinhança mútua: cada um está entre os 4 mais próximos do outro, com cosseno de ao menos 0,6 entre os embeddings já gravados no build; o conceito que ficaria sem vizinho conceito liga ao mais próximo com cosseno de ao menos 0,55 que não divide capítulo com ele. Sem nova chamada à API.