Introducción
La evaluación de los aprendizajes es un elemento determinante en la educación porque modula la forma en que los estudiantes abordan sus aprendizajes [1 2 - 3]. Tendría cinco grandes metas: determinar el grado de asunción por los estudiantes de los objetivos educativos, garantizar la futura competencia profesional de los graduados, garantizar la equidad, favorecer el aprendizaje de los estudiantes e informar a la institución sobre la marcha de los procesos docentes de las diferentes asignaturas de una carrera [4]. Así, la evaluación de los estudiantes ha de ser rigurosa y, por tanto, deben utilizarse metodologías acordes con los tipos de aprendizaje que se pretende evaluar. La comunidad educativa dispone de numerosas alternativas de evaluación para lograrlo [5 6 - 7].
En la evaluación del rendimiento académico en estudios de ciencias de la salud es muy habitual el uso de pruebas de elección múltiple y de pruebas de ensayo, de mayor o menor extensión [8 9 10 - 11]. Cada una de estas formas es especialmente adecuada para evaluar diversos niveles de objetivos educativos y ambas presentan determinadas ventajas, pero también ciertos inconvenientes.
Como se ha reportado [1,6,8,12,13], entre otros aspectos, las pruebas de elección múltiple serían adecuadas para evaluar resultados de conocimientos, comprensión, aplicación y análisis, pero no serían útiles para medir capacidad de síntesis y evaluación. Por el contrario, las pruebas de ensayo serían óptimas para evaluar estos dos altos niveles cognitivos. Las pruebas de elección múltiple, por el hecho de tener muchos ítems, permiten un buen muestreo representativo del contenido de un curso y, por tanto, garantizar una buena validez de contenido, lo que no ocurriría en las pruebas de ensayo.
En referencia a la elaboración y a la corrección, las pruebas de elección múltiple tienen un alto grado de dificultad y requieren un tiempo considerable, pero son muy fáciles de corregir. Contrariamente, las pruebas de ensayo serían fáciles de formular, pero difíciles y costosas de evaluar. Con respecto a la calificación de los estudiantes, las pruebas de elección múltiple serían objetivas, rápidas y fiables, mientras que las de ensayo serían más subjetivas, demoradas y menos fiables. También ambos tipos de pruebas tienen efectos diferentes sobre el aprendizaje de los alumnos, ya que las pruebas de elección múltiple ayudan a recordar, interpretar y analizar ideas de otros, especialmente del profesor, mientras que las de ensayo permiten organizar, integrar y expresar las ideas de los propios estudiantes. Un gran valor educativo que tienen las pruebas de elección múltiple sobre las pruebas de ensayo es que permiten un feedback inmediato si se dispensa la información oportuna a los alumnos.
La Facultad de Ciencias de la Salud y de la Vida de la Universitat Pompeu Fabra imparte los grados de Biología Humana, heredero de la extinta licenciatura de Biología, y de Medicina, este grado impartido de forma conjunta con la Universitat Autònoma de Barcelona. Los estudiantes de ambas titulaciones comparten buena parte de sus estudios, en concreto el 40,4% en el caso de Biología Humana y el 26,9% en el de Medicina [14]. En la Universitat Pompeu Fabra, la organización docente se organiza en trimestres y las asignaturas de las titulaciones se cursan en un único trimestre.
Desde sus inicios, la facultad dispone de un proyecto educativo donde la evaluación de los aprendizajes de los estudiantes ocupa un lugar predominante. Esta evaluación representa una tarea colectiva dirigida desde el decanato y llevada a cabo por un organismo técnico educativo (actualmente, la Unidad de Educación en Ciencias de la Salud). El proyecto colectivo de evaluación se caracteriza, entre otros aspectos, por el empleo de evaluaciones formativas a la mitad del período docente, por el uso de sesiones de evaluación conjuntas de todas las asignaturas del trimestre y por un feedbackinmediato al acabar los exámenes [15].
Para evaluar los aprendizajes de los alumnos, en todas las materias de ambas titulaciones se utilizan pruebas de elección múltiple y, en la inmensa mayoría de ellas, también pruebas de ensayo de extensión diversa. Como ya se ha comentado, ambos tipos de pruebas son habituales en estudios de ciencias de la salud tanto en las universidades españolas como en las del resto del mundo [8 9 10 - 11].
La mayoría de estudios que conocemos indican una fuerte relación positiva entre los resultados obtenidos en las pruebas de elección múltiple y en las de ensayo [12,16 17 18 - 19]. A pesar de dicha relación, se ha argumentado que ambos tipos de pruebas incidirían en evaluar dominios cognitivos de aprendizaje diferentes [12]. También, cuando se ha comparado el rendimiento de los alumnos en los dos tipos de pruebas, se han encontrado resultados dispares, unas veces favorables a las pruebas de elección múltiple [10,16, 17, 20], otras a las pruebas de ensayo [9, 19], y en otras ocasiones no se han hallado diferencias [8, 18, 21].
El presente trabajo pretende, como objetivo principal, determinar la posible relación entre resultados en ambas pruebas de los alumnos de nuestro centro e indagar las posibles diferencias que podrían producirse dependiendo de si las pruebas de ensayo son más o menos extensas. Un segundo objetivo sería determinar si existen diferencias de rendimiento académico de los alumnos en función de si la prueba es de elección múltiple o de ensayo.
Materiales y métodos
Selección de asignaturas para la realización del estudio
Para el estudio se seleccionaron asignaturas de diferentes características y pertenecientes a los grados de Biología Humana y de Medicina. En algunos casos, dichas asignaturas fueron cursadas de forma conjunta por estudiantes de ambos grados.
En primer lugar, se seleccionaron aquellas asignaturas de los grados de Biología Humana y de Medicina en las que eran responsables los autores del trabajo. En este caso, el estudio permitía contar con estudiantes de diversas promociones. En segundo lugar, se seleccionaron asignaturas de ambas titulaciones de características diferentes impartidas durante el segundo trimestre del curso 2016-2017.
Las asignaturas con datos acumulados de diversas cohortes de estudiantes fueron: Botánica (obligatoria en primer curso de Biología Humana, siete cohortes), Fisiología Vegetal (obligatoria en tercer curso de Biología Humana, siete cohortes), Psicología (obligatoria en tercer curso de Medicina, nueve cohortes), Psicología (optativa en tercer curso de Biología Humana, siete cohortes) y Nutrición (obligatoria en cuarto curso de Biología Humana, cinco cohortes, y de Medicina, seis cohortes).
Las materias cursadas en el segundo trimestre del curso 2016-2017 fueron: Zoología (obligatoria de primer curso de Biología Humana), Neurobiología (obligatoria de cuarto curso de Biología Humana), Histología (obligatoria de segundo curso de Biología Humana y de Medicina), Aparato Locomotor (obligatoria de cuarto curso de Medicina), Patología Médico-Quirúrgica V (obligatoria en quinto curso de Medicina) y Medicina Preventiva y Salud Pública (obligatoria en sexto curso de Medicina).
Procedimiento
Se registraron las calificaciones de la primera convocatoria de los exámenes finales acreditativos de todos los alumnos de las asignaturas seleccionadas en las pruebas de elección múltiple y de ensayo. En primer lugar, se calcularon las puntuaciones medias y las desviaciones estándares en ambas pruebas y se establecieron las posibles diferencias mediante la prueba t de Student. Posteriormente, se calcularon los coeficientes de correlación de Pearson entre ambas calificaciones.
Resultados
La tabla I presenta las asignaturas seleccionadas, el número de preguntas de pruebas de elección múltiple y de pruebas de ensayo de cada una de ellas, y su ubicación dentro de los planes de estudio de los dos grados estudiados.
N-PEM | N-ENS | Ubicación | Tipo de asignatura | |
---|---|---|---|---|
Botánica (7) | 20 | 10 | BH 1.º | Obligatoria |
| ||||
Fisiología Vegetal (7) | 20 | 10 | BH 2.º | Obligatoria |
| ||||
Psicología BH (7) | 24 | 20 | BH 3.º | Optativa |
| ||||
Psicología MED (9) | 30 | 20 | MED 1.º | Obligatoria |
| ||||
Nutrición BH (5) | 20 | 23 | BH 4.º | Obligatoria |
| ||||
Nutrición MED (6) | 20 | 23 | MED 4.º | Obligatoria |
| ||||
Zoología (1) | 20 | 9 | BH 1.º | Obligatoria |
| ||||
Neurobiología (1) | 20 | 4 | BH 4.º | Obligatoria |
| ||||
Histología (1) | 24 | 5 | BH y MED 2.º | Obligatoria |
| ||||
Aparato Locomotor (1) | 60 | 4 | MED 4.º | Obligatoria |
| ||||
Patología Médico-Quirúrgica V (1) | 50 | 5 | MED 5.º | Obligatoria |
| ||||
Medicina Preventiva y Salud Pública (1) | 40 | 21 | MED 6.º | Obligatoria |
BH: Biología Humana; MED: Medicina.
En la tabla II se muestra el número de estudiantes participantes en cada asignatura evaluada y la media ± desviación estándar obtenida en ambas calificaciones. También se presenta el valor dety su significación estadística en la comparación de medias y, finalmente, el valor de la correlación entre ambas calificaciones y su significación estadística.
n | PEM | ENS | t | r | Ventaja | |
---|---|---|---|---|---|---|
Botánica | 392 | 5,11 ± 2,2 | 5,77 ± 2,2 | –8,44 c | 0,75 c | ENS |
| ||||||
Fisiología Vegetal | 411 | 5,67 ± 2,1 | 6,46 ± 2,0 | –10,11 c | 0,70 c | ENS |
| ||||||
Psicología BH | 198 | 8,59 ± 1,2 | 8,44 ± 1,3 | 2,42 a | 0,75 c | PEM |
| ||||||
Psicología MED | 605 | 7,28 ± 1,6 | 7,47 ± 1,5 | –3,60 c | 0,65 c | ENS |
| ||||||
Nutrición BH | 278 | 6,37 ± 1,8 | 6,48 ± 1,5 | –1,27 | 0,58 c | |
| ||||||
Nutrición MED | 326 | 6,84 ± 1,6 | 6,97 ± 1,4 | –1,57 | 0,51 c | |
| ||||||
Zoología | 64 | 6,99 ± 1,5 | 7,21 ± 1,4 | –1,50 | 0,67 c | |
| ||||||
Neurobiología | 42 | 5,93 ± 1,9 | 6,83 ± 2,4 | –3,18 b | 0,66 c | ENS |
| ||||||
Histología BH-MED | 110 | 5,20 ± 2,2 | 6,83 ± 2,4 | –5,36 c | 0,69 c | ENS |
| ||||||
Aparato Locomotor | 52 | 6,31 ± 1,9 | 6,04 ± 2,0 | 1,54 | 0,80 c | |
| ||||||
Patología Médico-Quirúrgica V | 63 | 7,24 ± 1,4 | 7,19 ± 2,1 | 0,30 | 0,73 c | |
| ||||||
Medicina Preventiva y Salud Pública | 61 | 7,97 ± 1,3 | 7,46 ± 1,6 | 3,42 c | 0,70 c | PEM |
BH: Biología Humana; MED: Medicina; Ventaja: puntuación favorable ante diferencias significativas.
ap< 0,05;
bp< 0,01;
cp< 0,001.
Como puede observarse, en siete ocasiones se dieron diferencias significativas entre los resultados de las pruebas de elección múltiple y de ensayo: en cinco casos, fueron a favor de las pruebas de ensayo, y en dos, de las pruebas de elección múltiple. Por el contrario, en cinco ocasiones no existieron diferencias de rendimiento entre ambas pruebas. En todos los casos se obtuvieron altas correlaciones positivas entre los dos tipos de pruebas, siendo siempre significativas.
Discusión
Los resultados del estudio son muy concluyentes respecto a la relación entre el rendimiento académico de los estudiantes en las pruebas de elección múltiple y en las pruebas de ensayo. En todos los casos sin excepción la relación fue positiva y altamente significativa. Ello estaría en consonancia con la inmensa mayoría de estudios donde la relación es alta, significativa y positiva [12, 16 17 18 - 19].
Ligado al objetivo principal, también pretendíamos determinar si la relación entre los resultados en las pruebas estudiadas podría estar mediatizada por el número de preguntas en las pruebas de ensayo. Los resultados obtenidos indicarían que la relación positiva se mantiene siempre al margen de dicho factor, ya que las altas correlaciones se encuentran en las asignaturas tanto con menor como con mayor número de preguntas de ensayo.
Si bien no era el objetivo principal del estudio, al comparar el rendimiento de los alumnos en los dos tipos de pruebas encontramos resultados dispares. De las 12 comparaciones realizadas, en siete de ellas hallamos diferencias significativas, mientras que en las otras cinco no existieron. Teóricamente, se esperarían resultados mejores en las pruebas de elección múltiple porque se relacionarían con el reconocimiento, mientras que las pruebas de ensayo se asociarían al recuerdo. En general, el reconocimiento es más efectivo que el recuerdo [22]. De hecho, la mayoría de estudios realizados confirman mejores resultados en pruebas de elección múltiple que en pruebas de ensayo [5, 10 ,16 ,17 ,20]. A pesar de ello, en otros estudios se han presentado resultados favorables a las pruebas de ensayo [9 ,19] y también se han reportado trabajos donde no existían diferencias de rendimiento [8, 18, 21]. Nuestros resultados fueron acordes con los tres supuestos. Cuando se dieron diferencias, contrariamente a las previsiones, en cinco ocasiones los resultados fueron favorables a las pruebas de ensayo y solo en dos ocasiones a las pruebas de elección múltiple. También, en otras cinco ocasiones no se dieron diferencias de rendimiento entre las pruebas.
A pesar de la alta relación encontrada en nuestro estudio y considerando la adecuación de cada uno de los dos tipos de pruebas para evaluar los diferentes niveles de la taxonomía de Bloom [23], abogamos por la utilización tanto de las pruebas de elección múltiple como de las pruebas de ensayos en sus diferentes variantes. Este planteamiento coincidiría con la visión de numerosos autores que han realizado estudios similares [5, 9, 12, 17, 18, 24 25 - 26].
Quisiéramos recalcar la necesidad de que las pruebas de ensayo, pero especialmente de elección múltiple, se elaboren de forma correcta. Sobre las pruebas de ensayo, se debería hacer un esfuerzo para usar rúbricas u otros instrumentos con los cuales reducir al máximo la subjetividad [27]. En referencia a las pruebas de elección múltiple, si bien pueden formularse para evaluar niveles altos de tipos de aprendizaje [11, 13, 24, 28, 29], con frecuencia evalúan solamente resultados de conocimientos [13, 26, 30,31] y en múltiples ocasiones presentan numerosas deficiencias [8, 31, 32].
Este hecho contrasta con la existencia de guías para una correcta elaboración de preguntas escritas que están disponibles para todo profesional de la docencia [28, 29, 31].
Al igual que otros autores [8, 26, 30, 32, 33], destacamos la necesidad de formación de todos los docentes sobre evaluación de los aprendizajes, en especial de aquellos que se incorporan a la enseñanza universitaria en titulaciones de ciencias de la salud.