Guia independenteUm guia independente sobre o Jev, da TypeSafe AI
Primeiros passos

Leia o número junto da pergunta

Probabilidade e confiança no Jev: qual é a diferença?

Entenda a probabilidade de uma opção e a confiança de Choice sem confundi-las com acurácia medida.

Carregar este modelo

Fontes revisadas Atualização Versão do conteúdo 1

Tipo de evidência Exemplo didático fictício e original. Nenhum resultado do modelo está preenchido.

Exemplo didático fictício e original. Nenhum resultado do modelo está preenchido.

Um ponto de partida editável

Carregar este modelo
1 · Texto para verificar
Pergunta ou solicitação original: Onde posso baixar minha fatura e como altero o nome da empresa para o próximo mês? Resposta proposta: Baixe sua fatura em Cobrança → Faturas. Para as próximas faturas, altere o nome da empresa em Cobrança → Dados antes da próxima data de cobrança.
2 · Sua pergunta
A resposta atende a todas as partes explícitas da solicitação?
Quando se aplica Sim?
Todas as perguntas ou solicitações explícitas são respondidas, inclusive informando claramente quando uma resposta não está disponível.
Quando se aplica Não?
Pelo menos uma pergunta ou solicitação explícita não é respondida.

São probabilidades do modelo, não uma precisão medida ou garantia. Sim e Não correspondem às suas regras; as opções são comparadas apenas entre as que você forneceu.

Duas grandezas diferentes

A probabilidade de uma opção se refere a um resultado possível. A confiança de Choice resume o formato de toda a distribuição; não é outro nome para a maior probabilidade. Noul tem probabilidade de sim, sem um campo separado de confiança. Nosso editor mostra probabilidades do modelo, não acurácia medida de forma independente.

Um sim alto não demonstra aptidão geral para a tarefa. Na verificação de promessas, sim aponta um possível problema; na de cobertura, sugere uma condição atendida.

Use o exercício de resposta

Carregue a tarefa de cobertura, leia as regras e decida quais requisitos devem ser respondidos. Altere uma parte do rascunho e compare sugestões. Não há probabilidades esperadas, e uma mudança numérica sozinha não comprova melhora.

O editor não expõe o campo separado de confiança de Choice. Não chame uma das barras de probabilidade de confiança.

Procure erros aparentemente seguros

Experimente uma resposta que mencione todos os assuntos sem responder às perguntas e outra que responda claramente com palavras diferentes. Uma distribuição concentrada pode acompanhar interpretação errada, pergunta inadequada ou contexto insuficiente. Revise os erros mesmo quando os números parecem firmes.

Escolha limites com evidências

Antes de automatizar ações, reúna exemplos representativos e avalie-os sem olhar a saída do modelo. Separe aprovações incorretas de encaminhamentos desnecessários. Escolha o limite conforme o custo dos erros e confira em exemplos não usados para ajustar as regras. Não recomendamos um valor universal. Testes funcionais e resultados isolados não demonstram calibração nem acurácia geral.

Continue com: Verifique se uma resposta cobre o pedido.

Fontes e leituras complementares

Este guia se baseia na documentação oficial e nos relatos da comunidade vinculados. As observações da comunidade são atribuídas a seus autores.

  1. TypeSafe: Confidence
  2. TypeSafe: Noul
Como verificamos nossas fontes