Confiança

Contador de correções

• 0 correções feitas: reportes de estudantes respondidos por uma pessoa e explicações regeneradas depois da revisão.
• 72 explicações publicadas, das quais 24 (33%) foram revisadas por humano.
• 72 questões no banco, de 1 provas publicadas.

Taxa de erro material: em medição

Só publicamos o número depois de uma rodada real com pelo menos 200 casos julgados por especialista.

Erro material é: dispositivo errado, divergência errada entre o item e a lei ou afirmação jurídica falsa. Nossa meta é ficar abaixo de 2%.

Como medimos

1. Um conjunto de teste (golden) de pelo menos 200 itens, estratificado por disciplina, com a explicação correta escrita ou validada por especialista.
2. Rodamos o gerador de explicações sobre esses itens, sem mostrar a resposta certa a ele.
3. Uma pessoa julga cada resposta: dispositivo correto, trecho correto, "onde diverge" correto e tipo de pegadinha.
4. Só publicamos o número depois de uma rodada real com pelo menos 200 casos julgados. Rodadas de teste do sistema, com poucos casos, nunca viram número público.
5. Além disso, toda citação é verificada em código: o dispositivo citado existe, está vigente e o trecho consta do texto.

O conjunto de teste fica no repositório em evals/golden/explicacao.

O selo "revisado por humano"

Cada explicação mostra se um revisor humano a aprovou e quando. Sem o selo, a explicação foi gerada e verificada em código, mas ainda não foi lida por uma pessoa, e a tela diz isso. Só explicações com o selo aparecem nas páginas públicas de questões.

Achou um erro?

Use 👎 ou "reportar" na própria explicação. Um reporte recebe resposta de uma pessoa em até 48 horas úteis, e a correção entra no contador acima.