Pesquisa SPR Med · Governança humana
IA pode produzir. A responsabilidade continua humana.
As sete etapas do relatório técnico da equipe SPR separam qualidade clínica, construção do item e evidência psicométrica.
Uma questão pode estar clinicamente correta e ainda oferecer uma medida ruim. Cada tipo de revisão responde a uma pergunta diferente.
- Fluência de texto não demonstra validade da interpretação da nota.
- Aprovação clínica, alinhamento ao blueprint e análise psicométrica são decisões distintas.
- O artigo apresenta um método de governança; não demonstra eficácia educacional ou acurácia de previsão.
Por que separar as decisões de qualidade
O relatório técnico da nossa equipe parte de um problema da produção de avaliações: um texto plausível pode conter pistas involuntárias, alternativas pouco funcionais ou uma exigência cognitiva diferente daquela planejada. Corrigir o conteúdo clínico não resolve automaticamente esses problemas de construção e interpretação.
O fluxo descrito foi consolidado a partir da prática de desenvolvimento de itens durante 2025–2026 e de requisitos da literatura. Os autores explicam que não se trata de um consenso formal por Delphi e que o processo não foi avaliado empiricamente. Essa origem delimita o tipo de autoridade que o artigo oferece: uma proposta explícita de organização da responsabilidade.
Sete etapas, com evidências para cada decisão
O percurso começa por definir o artefato e o uso pretendido, registrar a participação da IA e identificar um responsável humano. Em seguida, separa revisão clínica, revisão da construção e linguagem do item, alinhamento ao blueprint, prontidão psicométrica e aprovação humana final.
Cada etapa precisa de um registro que sustente sua decisão: objetivo, proveniência, parecer clínico, checklist de redação, vínculo curricular ou plano de análise. Quando surge um problema, o artefato retorna à etapa pertinente. A sequência funciona como um percurso de revisão, com possibilidade de ajuste e nova avaliação.
Uma decisão humana em cada etapa
- Definir o artefato
O que foi produzido e para qual uso?
- Registrar proveniência
Onde a IA participou e quem responde pela revisão?
- Revisar conteúdo clínico
Há consistência factual e adequação das referências?
- Revisar construção e linguagem
Há ambiguidade, pistas ou alternativas frágeis?
- Conferir o blueprint
A questão avalia a competência pretendida?
- Examinar prontidão psicométrica
Há plano de evidências e resultados de piloto revisados quando necessários?
- Aprovar o uso
Quem libera, qual versão e com quais condições?
Autorizar um piloto e autorizar uso pontuado são decisões diferentes
A etapa de prontidão psicométrica pede um plano de evidências para o uso pretendido. Se houver piloto, seus resultados precisam retornar à revisão antes de uma decisão de uso pontuado. A assinatura de um especialista não substitui todas as informações necessárias para sustentar interpretações baseadas em escores.
Dificuldade observada, comportamento dos distratores e funcionamento diferencial podem revelar problemas que não estavam visíveis na leitura do texto. O esforço de análise depende do uso: uma questão para discussão formativa e uma avaliação com consequências acadêmicas exigem decisões proporcionais às interpretações que serão feitas.
O que uma coordenação pode solicitar ao revisar uma avaliação
Uma conversa objetiva com a equipe produtora pode começar por quatro registros: o objetivo da questão, quem revisou o conteúdo, como a questão se relaciona à matriz e quais evidências sustentam seu uso. Isso ajuda a diferenciar quantidade de material de qualidade documentada.
Na leitura SPR, rastreabilidade também permite corrigir o processo. Se as revisões identificam repetidamente distratores fracos ou competências mal classificadas, esse padrão orienta o desenvolvimento da equipe. O benefício esperado é uma rotina em que falhas possam ser localizadas, corrigidas e acompanhadas.
O manual conecta desenho prévio e verificação após a aplicação
O fluxo descrito pelo Inep separa encomenda, elaboração e revisão, montagem e estabelecimento do padrão de desempenho. Depois da aplicação, há triagem psicométrica dos itens, recalculada a cada exclusão. Isso permite distinguir a intenção da avaliação, expressa no blueprint, do funcionamento observado nas respostas.
A aproximação com o relato SPR está nessa separação de perguntas: o conteúdo está correto, o comando focaliza a competência pretendida e o resultado sustenta o uso proposto? São processos de instituições distintas, com responsabilidades próprias. O manual não valida o acervo SPR; oferece uma referência para tornar sua revisão mais específica e documentada.
A autoridade está no que o trabalho permite afirmar
O artigo não mede ganho de aprendizagem, desempenho da plataforma, equivalência de itens nem aumento de conceito ENAMED. Também não demonstra que todo item do acervo cumpriu todas as etapas. Os vínculos comerciais dos autores com a SPR Med são declarados. Apresentar método e limites juntos torna a contribuição mais examinável por quem pretende utilizá-la.
Três decisões que esta leitura pode orientar
Defina o uso antes da aprovação
Distingua discussão formativa, piloto e avaliação pontuada.
Peça evidências separadas
Registre revisão clínica, construção do item, blueprint e análise empírica quando necessária.
Preserve a responsabilidade
Identifique quem aprovou, com quais condições e qual versão do artefato.
Como a SPR Med pode apoiar esse trabalho
A SPR compartilha um método que pode ser discutido e examinado por coordenações e docentes. É essa combinação de produção, critérios explícitos e revisão responsável que queremos trazer à conversa sobre qualidade da avaliação médica.
Conhecer o portal gratuito para instituiçõesFontes e rastreabilidade
Os documentos sustentam os fatos indicados. As propostas de ação e as interpretações estão identificadas como leitura SPR Med.
- ENAMED: da matriz de referência ao resultado do participante
Manual para participantes e instituições. Divulgação no portal do Inep em 10/09/2026; 17 páginas.
Matriz e anatomia do item: pp. 5–9. Angoff, Rasch, EAP e equalização: pp. 10–13. Populações e conceito: pp. 3 e 15–16. Não fornece os coeficientes de transformação da nota de 2026. - Human-Governed Validation of Artificial Intelligence-Generated Medical Assessment Artifacts
Destefani VC, Ferreira MC, Destefani AC. Cureus. 2026;18(8):e115344.
Proposta de sete etapas de validação com governança humana. O artigo declara vínculos dos autores com a SPR Med e não avalia empiricamente a eficácia do fluxo.