O Inep (Instituto Nacional de Estudos e Pesquisas Educacionais) reciclou itens do Enem (Exame Nacional do Ensino Médio) para garantir que as provas aplicadas neste ano tenham questões inéditas.
Desde o início de 2021, a área técnica do instituto vem alertando para a escassez do BNI (Banco Nacional de Itens), que reúne as questões aprovadas para serem usadas na prova. Em março deste ano, um documento interno previa a possibilidade de utilização de itens utilizados em edições anteriores do Enem.
O exame será aplicado nos próximos dias 13 e 20 de novembro para cerca de 3,3 milhões de estudantes em todo o país.
Servidores do órgão relataram à reportagem que a reciclagem dos itens garante a qualidade da prova.
Questionado sobre a inclusão de questões sem pré-teste no Enem, o Inep respondeu que “qualquer informação sobre a entrada de itens novos no BNI é de caráter sigiloso, não podendo ser fornecida, como forma de não colocar em risco futuras edições do exame”.
Eles explicam que são questões feitas e pré-testadas em anos anteriores, mas que ficaram de fora das provas oficiais por terem apresentado alguma fragilidade nas informações piscométricas -que são as informações estatísticas que permitem a calibragem para a medição de diferentes proficiências entre os candidatos.
Segundo os servidores, as falhas dos itens foram identificadas e corrigidas para torná-los adequados. São perguntas que poderiam, por exemplo, ter algum problema no enunciado ou nas alternativas de resposta.
Ou seja, são itens que tinham seu conteúdo pedagogicamente aprovado, mas apresentavam alguma falha, que foi corrigida pelos elaboradores.
Em nota, o Inep disse que “todas as questões que compõem os cadernos de prova do Enem apresentam qualidade técnico-pedagógica” e que a prova desta edição foi construída “seguindo os mesmos critérios e procedimentos das edições anteriores”.
Ocimar Alavarse, coordenador do Gepave (Grupo de Estudos e Pesquisas em Avaliação Educacional) da USP, diz que a reciclagem foi uma solução encontrada pelo Inep diante de uma limitação severa do banco de itens. No entanto, diz que a medida não segue o que está previsto no protocolo de elaboração da prova.
“Existem dois tipos de reprovação no pré-teste: quando é encontrada uma falha severa e ele precisa ser descartado ou quando há um pequeno problema que pode ser ajustado. Mesmo nessa segunda opção, o protocolo prevê que o item volte para a pré-testagem.”
“A reciclagem não é a melhor solução, mas era a possível diante dessa situação. É melhor do que reutilizar itens”, diz.
Em edições anteriores do Enem, algumas questões já haviam sido utilizadas sem passar por pré-teste.
Quando isso ocorre, o peso de cada uma delas na composição da nota final é calibrado de acordo com o desempenho dos estudantes na prova.
“Não é o ideal, já que o correto seria que todos tivessem passado por pré-teste. Mas reformular um item que apresentou problema na pré-testagem é uma solução. Os elaboradores identificam a falha e reconstroem o item”, diz Tufi Machado, especialista em avaliação e professor da UFJF (Universidade Federal de Juiz de Fora).
Segundo os especialistas, a reciclagem dos itens também é uma forma de evitar desperdício de recursos públicos. Estima-se que cada item do Enem custe de R$ 2.000 a R$ 3.000 para ser elaborado, já que eles são feitos por uma banca de especialistas de cada área, passam por até quatro revisores e depois seguem para o pré-teste.
Desde 2009, quando o Enem ganhou o formato atual e virou vestibular, há dificuldade de produzir itens adequados em número suficiente para a compor a prova. O problema foi agravado durante o governo Jair Bolsonaro (PL), já que nos três primeiros anos de gestão não foram produzidas novas questões para compor o BNI.
O último pré-teste de questões aconteceu em 2019, no primeiro ano do governo de Bolsonaro.
O Enem é elaborado com base em um modelo matemático, a TRI (Teoria de Resposta ao Item), que exige questões calibradas com relação a parâmetros como o de dificuldade. Antes de serem utilizadas nas provas, elas devem ser respondidas por um grupo similar àquele que normalmente faz o exame (nos chamados pré-testes) para essa calibragem.
Os itens “também passam por uma análise de adequabilidade por parte das equipes pedagógicas e pela equipe psicométrica”. Segundo o documento interno de março deste ano, a carência de itens considerados adequados atingia as quatro áreas da prova, mas era mais grave em linguagens.
Conforme mostrou o jornal Folha de S.Paulo, foi a escassez de questões disponíveis para compor a prova que evitou a intenção da equipe do ex-ministro Milton Ribeiro de interferir nos conteúdos do Enem 2021.
No ano passado, às vésperas do exame, o governo passou por uma crise que envolveu denúncias de interferência em conteúdo e assédio moral de servidores. A Folha de S.Paulo ainda revelou que Bolsonaro chegou a pedir para Ribeiro questões que tratassem o golpe de 1964 por revolução, em consonância com o revisionismo histórico que ele e seus apoiadores defendem.