A questão de redação no concurso vestibular à universidade : validade e poder decisório

Abstract

Apresentam-se análises de validade e do poder decisório da questão de Redação nos concursos vestibular da Universidade Federal do Rio Grande do Sul e da Pontifícia Universidade Católica do Rio Grande do Sul, envolvendo 6516 candidatos comuns aos dois concursos. O estudo mostrou que a fidedignidade dos escores na questão de Redação foi expressivamente inferior às fidedignidades dos escores nas demais provas dos concursos. O poder de decisão, isto é, o poder de decidir sobre o sucesso ou o fracasso na conquista de vagas da questão de Redação mostrou-se baixo; mais de noventa por cento dos que conquistaram uma vaga teriam tido sucesso caso a questão de Redação não fosse considerada. O estudo aponta a necessidade das universidades desenvolverem projetos de pesquisa com o objetivo de aprimorar metodologias e critérios de atribuição de escores na questão de Redação, visando aumentar a sua validade.

Este artículo presenta un análisis de la validad y del poder de decisión de los resultados de la Redacción conseguidos por 6.526 candidatos en el examen de ingreso en la Universidad Federal del Rio Grande del Sur y de la Pontificia Universidad Católica del Rio Grande del Sur. El estudio demostró que el sistema de evaluación de la Redacción fue expresivamente menos fidedigno que el habido en los resultados de los demás examenes. El poder de decisión, o sea, el poder de decidir sobre el suceso o el fracaso en la conquista de plazas en la cuestión de la Redacción, se mostró bajo: más de noventa por ciento de los que conquistaron una plaza habrfan obtenido suceso aunque la Redacción no hubiera sido considerada. El estudio muestra la necesidad de que las universidades desenvuelvan proyectos de pesquisa con el objetivo de mejorar metodologías y criterios de evaluación de la Redación para aumentar su validez.

This study presents an analysis of the validity and defining capacity of written test (essay) grades achieved by 6,516 common candidates to both Universidade Federal do Rio Grande do Sul and Pontifícia Universidade Católica do Rio Grande do Sul. When compared to objective test grades of the same group, reliability of essay grades is significantly lower than the reliability of the scores in the other tests of the exam. Similarly the power of decision, i.e., the effectiveness in defining candidates that should be approved, is also low when the essay is considered: over 90% of successful candidates would also enter university if there were no essay test at all. This investigation points out that university should develop research on evaluation methods and scoring criteria for the essay test to select university students, aiming at increasing its validity.