Avaliação da qualidade do Enem 2009 e 2011 com técnicas psicométricas

Q: Qual é o objetivo da meta-avaliação apresentada no estudo?

Avaliar a qualidade do Enem 2009 e 2011 por meio de técnicas psicométricas aplicadas a um grande conjunto de provas.

Q: Quais indicadores são comparados na análise da qualidade?

O estudo compara indicadores relacionados à prova (coeficiente α e correlação interitem média) e principalmente aos itens (correlação item-total, coeficiente bisserial, discriminação e ajuste do modelo logístico de dois parâmetros).

Q: Que resultados de confiabilidade e de comportamento dos itens foram encontrados?

A prova de Matemática de 2009 apresentou confiabilidade insuficiente (α < 0,6). Além disso, foram identificados 25% de itens com comportamento empírico fora do esperado em 2009 e 17% em 2011.

Sep 7, 2026

Carregar por Angel

Realiza-se uma meta-avaliação do Exame Nacional do Ensino Médio (Enem) de 2009 e 2011, com aplicação de técnicas psicométricas em 2.025.268 provas. Apresenta-se a análise do conteúdo de itens e evidencia-se sua utilidade para educadores. Comparam-se indicadores ligados à prova (coeficiente α e correlação interitem média) e sobretudo aos itens (correlação item-total, coeficiente bisserial – CB –, discriminação e ajuste do modelo logístico de dois parâmetros). A prova de Matemática de 2009 mostra confiabilidade insuficiente (α < 0,6), enquanto Linguagens e Códigos e Ciências Humanas exibem melhores indicadores nos dois anos. Encontram-se 25% de itens fora do esperado em 2009 e 17% em 2011.

IdiomaPortuguese

CategoriaPesquisa e Relatórios

FormatoPDF

Páginas34

Tempo de leitura52 min

AcessoDownload gratuito

Índice

Introdução

Contexto e relevância do Enem

Referenciais internacionais de testes educacionais

Lacunas na documentação sobre especificações psicométricas

Problema de pesquisa: quais especificações para o Enem?

artigos [http://dx.doi.org/10.18222/eae.v28i67.3910](http://dx.doi.org/10.18222/eae.v28i67.3910) avaliaçãoda qualidadedo enem2009 e 2011 comtécnicas psicométricas RodRigo TRaviTzki * Este trabal ho foi realizado comapoio do Consel ho Nacional de Desenvolvimento Científico e Tecnológico (CNPq)– Brasil. Resumo Foi realizada uma meta-avaliação do Exame Nacional do Ensino Médio (Enem) de 2009 e 2011, aplicando-se técnicas psicométricasem 2.025.268 provas. Algumas técnicas foram exemplificadas coma apresentação da análise do conteúdo de itens, mostrando suautilidade aos educadores. Comparou-se indicadores relacionados à prova (coeficiente α e correlação interitem média), mas principalmenterelativos aos itens (correlação item-total, coeficiente bisserial – CB –, discriminação e ajuste do modelo logístico de dois parâmetros). Aprova de Matemática de 2009 apresentou confiabilidade insuficiente (α < 0,6). As provas de Linguagens e Códigos e Ciências Humanasapresentaram, nos dois anos, melhores indicadores de qualidade. Ao todo, foram encontrados 25% de itens com comportamento empírico fora do esperado em 2009, e 17% em 2011. PalavRas-chave Meta-avaliação • PsicoMetria • avaliaçãoeM larga escala • eneM. 256 Est. Aval. Educ., São Paulo, v. 28, n. 67, p. 256-288, jan./abr. 2017 evaluación de la calidad del enem 2009 y 2011 con técnicas psicométricas Resumen Se llevó a cabo una metaevaluación del Exame Nacional do Ensino Médio (Enem) de 2009 y 2011 por medio de la aplicación de técnicaspsicométricas en 2.025.268 pruebas. Algunas de estas técnicas se ejemplificaron con la presentación del análisis del contenidode ítems, lo que puso de manifiesto su utilidad a los educadores. Se compararon indicadores relacionados con la prueba (coeficiente α y correlación inter-ítem media), pero sobre todo los relativos a los ítems (correlación ítem-total, coeficiente biserial – CB –, discriminación y ajuste del modelo logístico de dos parámetros). La pruebade Matemáticas de 2009 presentó confiabilidad insuficiente (α < 0,6). Las pruebas de Lenguajes y Códigos y Ciencias Humanas presentaron, en los dos años deestudio, mejores indicadores de calidad. En total se encontró un 25% de ítems con comportamiento empírico fuera de lo esperado en 2009, y un 17% en 2011. PalabRas clave Metaevaluación • PsicoMetría • evaluación en granescala • eneM. evaluation of enem (2009 and 2011)quality with psychometric techniques absTRacT This study is a meta evaluation of the Exame Nacional do Ensino Médio [National Secondary Education Examination](Enem) of 2009 and 2011, applying psychometric techniques to 2.025.268 tests. Some techniques were illustrated by analysis of item content, showing their usefulness to educators. We compared indicators related to the tests (α coefficient and average inter-item correlation), but mainly related to the items (item-whole correlation, biserial coefficient, discrimination and fit of two-parameter logistic model). The 2009 Mathematics test showed insufficient reliability (α <0.6). The Language and Human Sciences tests showed better quality indicators in both years. In total, we found 25% of items with anomalous empirical behavior in 2009 and 17% in 2011. keywoRds Meta evaluation • PsychoMetrics • large-scale evaluation • eneM. Est. Aval. Educ., São Paulo, v. 28, n. 67, p. 256-288, jan./abr. 2017 257 inTRoduÇÃo O Exame Nacional do Ensino Médio (Enem) encontra-se hoje, juntamente com o exame chinês para admissão na universidade (gao kao), entre os maiores testes do mundo quanto aonúmero de candidatos, contando oito milhões de inscritosem 2015. Sendo um exame voluntário, sua alta atratividadedecorre das diversas recompensas a ele atreladas, tais como: admissão na maioria das faculdades públicas do país; obtenção de bolsa ou financiamento para cursar uma faculdade privada; obtenção de certificação de ensino médio (EM), mesmo sem ter frequentado a escola (BRASIL, 2010) . Por tais recompensas, pode-se conside

Perguntas frequentes

Qual é o objetivo da meta-avaliação apresentada no estudo?

Avaliar a qualidade do Enem 2009 e 2011 por meio de técnicas psicométricas aplicadas a um grande conjunto de provas.

Quais indicadores são comparados na análise da qualidade?

O estudo compara indicadores relacionados à prova (coeficiente α e correlação interitem média) e principalmente aos itens (correlação item-total, coeficiente bisserial, discriminação e ajuste do modelo logístico de dois parâmetros).

Que resultados de confiabilidade e de comportamento dos itens foram encontrados?

A prova de Matemática de 2009 apresentou confiabilidade insuficiente (α < 0,6). Além disso, foram identificados 25% de itens com comportamento empírico fora do esperado em 2009 e 17% em 2011.

Sep 7, 2026

Carregar por Angel