Resumen
O Exame Nacional do Ensino Médio (ENEM) no Brasil, é uma avaliação em larga escala que tem o objetivo de medir o conhecimento de estudantes ao final da Educação Básica. Em 2009 a Educação Física passou a compor o Exame. Dessa forma, a pesquisa objetivou analisar os itens de Educação Física do exame dos anos de 2009 a 2014 a partir da teoria clássica. Para isso, a pesquisa tem um enfoque predominantemente quantitativo e exploratório. O estudo foi realizado com uma amostra aleatória de participantes do estado do Ceará, Brasil, que realizaram o exame. Foram analisados os seguintes parâmetros: validade, fidedignidade, dificuldade e discriminação. Os itens apresentaram bons valores de correlação e adequação da amostra. No entanto, apresentaram escores de comunalidade e cargas fatoriais inadequados para composição da prova. A Análise Fatorial Exploratória apresentou baixa explicação da variância considerando apenas um fator, mesmo Scree plot indicando a unidimensionalidade. Os valores de fidedignidade foram bons, não havendo influência dos itens de Educação Física. A dificuldade e discriminação apresentaram valores aceitáveis em quase todos os anos. No entanto, em 2014 a prova não apresentou unidimensionalidade. Neste ano, os itens apresentaram alta dificuldade e baixa discriminação. Dessa forma, alguns itens de Educação Física do exame não apresentaram parâmetros adequados. As provas de Linguagens e Códigos do exame apresentaram dificuldades de comprovação da unidimensionalidade. Tais fatores podem comprometer a validade da medida e consequentemente dos resultados desse exame, podendo interferir no ingresso de milhões de brasileiros no Ensino Superior.
Resumen: El Examen Nacional de la Secundaria Superior (ENEM), en Brasil, es una evaluación a gran escala que tiene el objetivo de medir el conocimiento de estudiantes al final de la Educación Básica. En 2009, la educación física pasó a componer el examen. De esta forma, la investigación tuvo por objetivo analizar los ítems de Educación Física del Examen de los años 2009 a 2014 a partir de la teoría clásica. Para ello, la investigación presenta un enfoque predominantemente cuantitativo y exploratorio. El estudio se realizó con una muestra aleatoria de participantes del estado de Ceará, Brasil, que fueron examinados. Se analizaron los siguientes parámetros: validez, fiabilidad, dificultad y discriminación. Los ítems presentaron buenos valores de correlación y adecuación de la muestra. Sin embargo, indica comunalidad y cargas factoriales inadecuadas para la composición de la prueba. El Análisis Factorial Exploratorio presentó baja explicación de la varianza al considerar solo un factor, a pesar de que lo scree plot indica la unidimensionalidad. Los valores de fiabilidad fueron buenos, no habiendo influencia de los ítems de Educación Física. La dificultad y la discriminación presentaron valores aceptables en casi todos los años. No obstante, en 2014, la prueba no presentó unidimensionalidad. Este año, los ítems presentaron alta dificultad y baja discriminación. Así, algunos ítems de Educación Física del examen no muestran parámetros adecuados. Las pruebas de Lenguajes y Códigos del examen presentaron dificultades de comprobación de la unidimensionalidad. Tales factores pueden comprometer la validez de la medida y consecuentemente de los resultados de ese examen, y pueden interferir en el ingreso de millones de brasileños en la Enseñanza Superior.
Citas
Andrade, Dalton Francisco de; Tavares, Héliton Ribeiro e Valle, Raquel da Cunha. (2000). Teoria de Resposta ao Item: Conceitos e Aplicações. ABE – Associação Brasileira de Estatística. Recuperado de https://docs.ufpr.br/~aanjos/CE095/LivroTRI_DALTON.pdf
Andrade, Josemberg Moura; Laros, Jacob Arie e Gouveia, Valdiney Veloso. (2010). O uso da teoria da resposta ao item em avaliações educacionais: diretrizes para pesquisadores. Avaliação Psicológica, 9(3), 421-435. Recuperado de http://pepsic.bvsalud.org/scielo.php?script=sci_arttext&pid=S1677-04712010000300009
Beltrão, José Arlén. (2014). A educação física na escola do vestibular: as possíveis implicações do ENEM. Movimento, 20(2), 819-840. doi: https://doi.org/10.22456/1982-8918.41801
Cunha, Cristiane Martins; Almeida Neto, Omar Pereira e Stackfleth, Renata Stackfleth. (2016). Principais métodos de avaliação psicométrica da confiabilidade de instrumentos de medida. Rev. Aten. Saúde, 14(49), 98-103. doi: https://doi.org/10.13037/ras.vol14n49.3671
Fernandes, Anoel, Rodrigues, Heitor Andrade, e Nardon, Tiago Aparecido. (2013). A inserção dos conteúdos de educação física no ENEM: entre a valorização do componente curricular e as contradições da democracia. Motrivivência, (40), 13-24. doi: https://doi.org/10.5007/2175-8042.2013v25n40p13
Field, Andy. (2009). Descobrindo estatística usando o SPSS. (L. Vialli, Trad.). Porto Alegre: ArtMed.
Freitas, Dirce Nei Teixeira. (2013). Avaliação da educação básica no Brasil: origens e pressupostos. Adriana Bauer, Bernadette Angelina Gatti, e Marialva Tavares (Orgs.), Vinte e cinco anos de avaliação de sistemas educacionais no Brasil: origens e pressupostos (pp. 147-176). Florianópolis: Insular.
Gatti, Bernadette Angelina. (2013). Possibilidades e fundamentos de avaliação em larga-escala: primórdios e perspectivas contemporâneas. In Adriana Bauer, Bernadette Angelina Gatti, e Marialva Tavares (Orgs.), Vinte e cinco anos de avaliação de sistemas educacionais no Brasil: origens e pressupostos (pp. 47-69) Florianópolis: Insular.
Governo do Brasil, Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (INEP). (2013). Exame Nacional do Ensino Médio (Enem): relatório pedagógico 2009-2010. Brasília, Brasil: O Instituto.
Governo do Brasil, Ministério da Educação. (2000). Parâmetros curriculares nacionais: ensino médio. Brasília, Brasil: Ministério da Educação.
Hair, Joseph F., Black, William C., Babin, Barry J., Anderson, Rolph E., and Tatham, Ronald L. (2005). Análise multivariada de dados (5a ed.). Porto Alegre: Bookman.
Laros, Jacob Arie. (2009). Análise gráfica de itens. In: Pasquali, Luis (Org.). Psicometria: teoria dos testes na psicologia e na educação (Cap. 5; 3a ed.). Petrópolis: Vozes.
Muñiz, José. La medición de lo psicológico. (1998). Psicothema, 10(1), 1-21. Recuperado de http://www.psicothema.com/psicothema.asp?id=138
Pasquali, Luis. (2009). Psicometria: teoria dos testes na psicologia e na educação (3a. ed.) Petrópolis: Vozes.
Pontes Junior, José Airton de Freitas; Soares, Edson Silva; Almeida, Leandro Silva e Trompieri Filho, Nicolino. (2014). Análise fatorial exploratória e alpha de Cronbach: elementos iniciais na validação de instrumentos de avaliação educacional. Educação & Linguagem, 1(1), 63-75. Recuperado de https://www.fvj.br/revista/wp-content/uploads/2014/12/5Artigo1.pdf
Sartes, Laisa Marcorela Andreoli e Souza-Formigoni, Maria Lúcia Oliveira. (2013). Avanços na Psicometria: Da Teoria Clássica dos Testes à Teoria de Resposta ao Item. Psicologia: Reflexão e Crítica, 26(2), 241-250. doi: http://dx.doi.org/10.1590/S0102-79722013000200004
Silveira, Fernando Lang. (1983). Considerações sobre o índice de discriminação de itens em testes educacionais. Educação & Seleção, (07). Recuperado de http://publicacoes.fcc.org.br/ojs/index.php/edusel/article/view/2546
Souza Junior, Osmar Moreira; Diniz, Irlla Karla Santos; Ditomaso, Aline e Darido, Suraya Cristina. (2012, outubro). Educação física no ENEM: análise das questões à luz dos PCN’s. Anais do II Congresso Internacional de Educação Física, Esporte e Lazer. São Carlos, Brasil. Recuperado de http://motricidades.org/conference/index.php/cpqmh/5cpqmh/paper/viewFile/230/140
Tavares, Cristina Zukowsky. (2013). Teoria de resposta ao item: uma análise crítica dos pressupostos epistemológicos. Est. Avali. Educ., 24(54), 56-76. doi: http://dx.doi.org/10.18222/eae245420131902
Valle, Raquel da Cunha. (2000). Teoria de resposta ao item. Est. Aval. Educ., (21), 07-92. doi: http://dx.doi.org/10.18222/eae02120002225
Vianna, Heraldo Marelim. (1976). Testes em educação. São Paulo: IBRASA.
Vitoria, Florbela; Almeida, Leandro Silva e Primi, Ricardo. (2006). Unidimensionalidade em testes psicológicos: conceito, estratégias e dificuldades na sua avaliação. Psic, 7(1), 01-07. Recuperado de http://pepsic.bvsalud.org/scielo.php?script=sci_arttext&pid=S1676-73142006000100002