Factorial validity of a questionnaire to evaluate university students' initial perception of learning evaluation

Abstract

Introduction: Education research has clearly verified that a student's perception of the system to evaluate the subject matter will play a fundamental role in his/her implication (deep approach vs. surface approach) in the teaching/learning process of the subject matter. The present work aims to examine the factorial validity and reliability of a scale to evaluate university students' perceptions when the academic year starts of the evaluation system ofthe subject matter to be taught. Method: A scale was created from debates organised with, and reflections made, in discussion groups during a seminar on education evaluation at the universitat jaume I. It was run by the unitat de suport educatiu (Education Support Unit) in academic years 2012/13 and 2013/14, and 18 teachers participated who taught the various subject matters and degrees. A questionnaire was administered to a study sample of 435 university students who studied different matters and degrees. Results: The results from a confirmatory factorialanalysis and cronbach's alpha revealed that: A) the questionnaire had a three-dimensional structure; That is, itconsisted in three independent factors that refer to three important constructs of the evaluative quality of learning; b) it had good psychometric properties for validity and reliability Conclusion: The practical implications that can derive from using this instrument in the university context are discussed herein.

Introducción. La investigación educativa ha comprobado ampliamente que la percepción del estudiante sobre el sistema de evaluación de la asignatura va a jugar un papel fundamental en su implicación (enfoque profundo vs. enfoque superficial) en el proceso de enseñanza/aprendizaje de la asignatura. El objetivo del presente trabajo consistió en examinar la validez factorial y fiabilidad de una escala para evaluar la percepción de los estudiantes universitarios, al inicio de curso, sobre el sistema de evaluación de la asignatura que van a cursar. Método. La escala fue creada a partir de los debates y reflexiones llevados a cabo en grupos de discusión de un seminario sobre evaluación educativa desarrollado en la Universitat Jaume I, organizado por la Unitat de Suport Educatiu (USE) durante los cursos 2012/13 y 2013/14, y en el que participaron un total de 18 profesores/as que impartían docencia en diferentes asignaturas y titulaciones. El cuestionario se aplicó a una amplia muestra de 435 estudiantes universitarios de diferentes asignaturas y titulaciones. Resultados. Los resultados obtenidos a través de un análisis factorial confirmatorio y del test alpha de Cronbach revelaron: a) que el cuestionario posee una estructura tridimensional, es decir, está formado por tres factores independientes que se refieren a tres constructos importantes relacionados con la calidad evaluativa de los aprendizajes y b) que posee buenas propiedades psicométricas de validez y fiabilidad. Conclusión. Las implicaciones prácticas que se pueden derivar de la utilización de este instrumento en el contexto universitario se discuten en el artículo.