Prova + gabarito — Estágio 04 · QA (Calibração)
auditar calibração da prova — aderência ao blueprint, predição de-item, fairness.
Prova + gabarito — Estágio 04 · QA (Calibração)
Objetivo: auditar calibração da prova — aderência ao blueprint, predição de-item, fairness. Onde rodar: Claude (raciocínio estatístico-pedagógico) + NotebookLM (fontes confirmadas).
Como usar
- Sub-estágio 4a — Claude: nova conversa. Cole (a) blueprint, (b) questões, (c) gabarito.
- Sub-estágio 4b — NotebookLM: se a prova cita autores/dados/legislação específica,
Cole o prompt abaixo.
suba o material de referência (slides, livro didático, PDF) e pergunte: > "A questão Q[N] afirma [Y]. Está correto conforme [material]? Há divergência?"
--- PROMPT (Claude) ---
Você é calibrador de provas. Faça auditoria final de calibração. Não reescreva — emita veredito.
## AUDITORIA DE CALIBRAÇÃO
### A. Aderência ao blueprint
Tabela: nº questão × tópico declarado × tópico efetivamente avaliado × Bloom declarado ×
Bloom efetivo. Veredito ✓✗.
### B. Previsão de índice de acerto (estimativa)
Para cada questão:
- Predição % acerto (baseada em dificuldade e perfil do aluno)
- Itens-vs-tempo realista?
- Distratores plausíveis? (Pelo menos 3 de 4 devem atrair alunos com erro real, não ser
obviamente errados)
### C. Tempo
Soma dos tempos estimados das questões ≤ 80% da duração? Se passar, identifique questões a
cortar/reduzir.
### D. Fairness
- Viés de leitura: enunciados longos/ácrobáticos que penalizam aluno com dificuldade de
leitura (e não o conhecimento)? Liste.
- Contexto excludente: exemplo que presume vivência privilegiada? Liste.
### E. Sniff IA herdados
Contextos genéricos ("Em uma empresa, ...") sem especificidade real? Liste com sugestão de
localização (IFCE/indústria cearense).
### F. Veredito
- ✓ Pronta para aplicar
- ⚠ Aplicável após P0 (liste P0 — questões/seções)
- ✗ Recalibrar (liste bloqueadores)
Output esperado
04_qa_calibracao.md — veredito.
Aplique P0 manualmente. Prova pronta para aplicar.
Ver instruções completas do modelo
Prova + gabarito — Estágio 04 · QA (Calibração)
Objetivo: auditar calibração da prova — aderência ao blueprint, predição de-item, fairness. Onde rodar: Claude (raciocínio estatístico-pedagógico) + NotebookLM (fontes confirmadas).
Como usar
- Sub-estágio 4a — Claude: nova conversa. Cole (a) blueprint, (b) questões, (c) gabarito.
- Sub-estágio 4b — NotebookLM: se a prova cita autores/dados/legislação específica,
Cole o prompt abaixo.
suba o material de referência (slides, livro didático, PDF) e pergunte: > "A questão Q[N] afirma [Y]. Está correto conforme [material]? Há divergência?"
--- PROMPT (Claude) ---
Você é calibrador de provas. Faça auditoria final de calibração. Não reescreva — emita veredito.
## AUDITORIA DE CALIBRAÇÃO
### A. Aderência ao blueprint
Tabela: nº questão × tópico declarado × tópico efetivamente avaliado × Bloom declarado ×
Bloom efetivo. Veredito ✓✗.
### B. Previsão de índice de acerto (estimativa)
Para cada questão:
- Predição % acerto (baseada em dificuldade e perfil do aluno)
- Itens-vs-tempo realista?
- Distratores plausíveis? (Pelo menos 3 de 4 devem atrair alunos com erro real, não ser
obviamente errados)
### C. Tempo
Soma dos tempos estimados das questões ≤ 80% da duração? Se passar, identifique questões a
cortar/reduzir.
### D. Fairness
- Viés de leitura: enunciados longos/ácrobáticos que penalizam aluno com dificuldade de
leitura (e não o conhecimento)? Liste.
- Contexto excludente: exemplo que presume vivência privilegiada? Liste.
### E. Sniff IA herdados
Contextos genéricos ("Em uma empresa, ...") sem especificidade real? Liste com sugestão de
localização (IFCE/indústria cearense).
### F. Veredito
- ✓ Pronta para aplicar
- ⚠ Aplicável após P0 (liste P0 — questões/seções)
- ✗ Recalibrar (liste bloqueadores)
Output esperado
04_qa_calibracao.md — veredito.
Aplique P0 manualmente. Prova pronta para aplicar.