Abstracts IJEE 7 (2.3)
A Comparison of Angoff’s and Holland’s Assumptions in the Levine Observed Score Equating Method: An Educational and Evaluation Study
Jorge Carvajal Espinoza, & Hyeon-Joo Oh
Received: 8 June 2021 • Accepted: 3 November 2021
Abstract: Evaluation and assessment processes are fundamental in educational dynamics, especially in higher education. In this context, the use of tests is every day and, in many circumstances, essential. In relation precisely to the tests, this study examined the operation of certain assumptions in the context of the Non-Equivalent groups with Anchor Test (NEAT) design under particular conditions using a simulation in which complete information on the performance of groups P and Q on tests X and Y would be known. Then the estimates could be compared against actual values. Results indicate that the difference in estimation from both assumptions appears to be of no practical significance, given that this difference is not expected to result in a change in actually reported scores. Practitioners need to know the implications of the use of different assumptions when choosing an equating method. Equating is very important, especially when different forms of a test are administered. If different forms show high differences in difficulty, the test results would not be comparable, and the test takers would not be treated fairly.
Título: Comparación de los Supuestos de Angoff y Holland en el Método de Equiparación de Puntuaciones Observadas de Levine: Estudio Educativo y Evaluativo
Resumen: Los procesos de evaluación y valoración son fundamentales en las dinámicas educativas, especialmente en la educación superior. En estos contextos, el uso de pruebas es cotidiano y, en muchas circunstancias, imprescindible. En relación precisamente con los tests, este estudio consideró el funcionamiento de ciertas suposiciones en el contexto del diseño de grupos no equivalentes con test ancla. Este estudio se realizó con condiciones muy específicas por medio de un estudio de simulación en el cual es posible conocer la información total en el desempeño de los grupos P y Q en los tests X y Y. A partir de ahí los valores estimados se pueden comparar con los valores verdaderos. Los resultados indicaron que la diferencia en la estimación no es de esperar que produzca un cambio en las notas de hecho reportadas. Es importante para los usuarios de la equiparación de puntuaciones conocer las implicaciones de las diferentes suposiciones al escoger un método de equiparación de puntuaciones. La equiparación de puntuaciones es muy importante especialmente cuando se aplican diferentes formularios de un test. Si los diferentes formularios muestran diferencias muy altas en dificultad, entonces los resultados del test no serían comparables y los sujetos que tomaron el test no habrían sido tratados justamente.
Key-Words: evaluation; assessment; higher education; test; NEAT equating methodology.
Palabras Clave: evaluación; evaluación; educación superior; test; metodología NEAT.