5 Directrices para la elaboración de buenas evaluaciones en línea

El artículo del mes pasado hablaba de los muchos beneficios de las evaluaciones por ordenador, pero terminaba con una advertencia. La tecnología no puede mejorar una evaluación mal diseñada, sólo escala una evaluación mal diseñada a más personas. De hecho, la parte más difícil de desarrollar buenas evaluaciones en línea a menudo ocurre fuera de ella: desarrollar evaluaciones que sean fiables, justas, válidas y transparentes.

El artículo de este mes comiena con esa advertencia. Y aunque no podemos exponer todo lo necesario para desarrollar buenas evaluaciones en línea o por computadora, este artículo ofrece cinco pautas para desarrollar evaluaciones que sean justas, fiables, transparentes y válidas, en otras palabras, que sean “buenas”.

1. Recuerde el antes, durante y después de la evaluación

La

Figura 1: La “triple función” de la evaluación: evaluar lo que los alumnos saben antes, durante y después del ejercicio de aprendiaje formal.

La evaluación no sólo se realia después de un curso o módulo o unidad en línea. Puede (y debe) ocurrir antes del aprendiaje, durante el aprendiaje y después del aprendiaje. Me gusta decir que la evaluación tiene una triple función -es diagnóstica, formativa y sumativa- que nos ayuda a evaluar dónde están los estudiantes antes, durante y después del aprendiaje. La figura 1 ilustra la interconexión de estos tres tipos de evaluación.

2. 2. Saber por qué queremos evaluar

Las evaluaciones deberían ser realmente sobre la medición de los resultados del aprendiaje. Y los resultados del aprendiaje deberían tratarse de que los estudiantes demuestren lo que saben y, lo que es más importante, lo que pueden hacer (habilidades). Los resultados del aprendiaje pueden ser de bajo nivel (recordar la información) o de alto nivel (analiar la información). Un gran recurso, probado a lo largo del tiempo, para ayudarnos a entender los diversos niveles de aprendiaje, que luego podemos evaluar, es la Taxonomía de Bloom. (Ver Figura 2)

Taxonomía de Bloom

Figura 2: Taxonomía de los dominios cognitivos del aprendiaje de Bloom. Fuente: Wikimedia Commons

3. 3. Elegir la herramienta adecuada para evaluar el conjunto adecuado de competencias

Hay muchos tipos diferentes de evaluaciones, desde pruebas a proyectos, pasando por tareas basadas en el rendimiento, ensayos, etc. Cada una de ellas tiene una función particular y por lo tanto puede ser apropiada o inapropiada dependiendo de lo que queramos evaluar. Por lo tanto, la elección del instrumento o método de evaluación adecuado es primordial. La figura 3 que figura a continuación puede ayudarnos a clasificar los tipos comunes de instrumentos o métodos de evaluación.

Marco de evaluación

Figura 3: Tipos comunes de evaluaciones y sus ventajas y desventajas (Adaptado de Commonwealth of Learning y Banco Asiático de Desarrollo, 2008: 4–13, 4–14)

3. Recuerde, es o “abierto” o “cerrado”

Como se muestra en la figura 4, hay en general dos tipos de métodos de evaluación: los métodos de respuesta selectiva y los métodos de respuesta construida.

Con los métodos de respuesta selectiva, nuestros estudiantes en línea “seleccionan” respuestas de una selección. Verdadero/falso y de elección múltiple son los métodos de respuesta selectiva más comunes. Las respuestas seleccionadas son buenas para recordar/reconocer hechos, tipos limitados de raonamiento. No son buenos en absoluto para evaluar las habilidades de los estudiantes.

Con un método de respuesta construido, nuestros alumnos “construyen” o “suministran” su respuesta. Las respuestas construidas son buenas para las descripciones/explicaciones. Los elementos de respuesta construidos sencillos (rellenar el espacio en blanco) siguen midiendo habilidades de bajo nivel. Sin embargo, las evaluaciones de respuestas construidas más abiertas (como los ensayos) pueden evaluar un conocimiento más profundo y el pensamiento del estudiante.

Las evaluaciones del Sistema de Gestión del Aprendiaje y las de las herramientas de desarrollo de contenidos, como el Articulate 360, funcionan mucho mejor con elementos de respuesta seleccionados, en lugar de construidos.

Respuesta selectiva vs. respuesta construida

Figura 4: Respuestas seleccionadas vs. construidas (o “suministradas”)

4. Ok, ya que todos vamos a crear pruebas de opción múltiple de todos modos, escuchen…

A todos nos gustan los exámenes de opción múltiple, y son omnipresentes en el aprendiaje en línea. Son fáciles de tomar, fáciles de calificar y fáciles de crear. Excepto que no son fáciles de crear. En realidad son difíciles de crear bien y la mayoría de nosotros, a menos que seamos psicómetras, no los creamos tan bien. Así que, aquí hay algunas pautas para crear pruebas de opción múltiple (¡que, con suerte, empearé a seguir también!)

  • Deje el tallo claro, haga una pregunta, y hágala breve.
  • En el caso de las preguntas de nivel superior (por ejemplo, centradas en el análisis, la síntesis o la evaluación), el tallo debería tener más información, pero aún así debería ser breve.
  • Haga que las respuestas sean directas, sin información extra sin sentido. El alumno nunca debe ser capa de adivinar la respuesta correcta por la forma en que está escrita.
  • No uses “Todo lo anterior” o “Nada de lo anterior”. Esas alternativas recompensan a los estudiantes que no saben las respuestas. Si DEBE usar “Ninguna de las anteriores”, úselas con precaución. Los expertos dicen que si usas esta opción, sólo debe ser correcta 1 de cada 4 veces.
  • Asegúrate de que todas tus respuestas -la correcta y los distractores (las respuestas incorrectas)- sean consistentes en longitud, estilo, etc. No queremos que los estudiantes obtengan la respuesta correcta porque se ve diferente de las respuestas incorrectas.
  • Aumentar la verosimilitud de los distractores incluyendo información extraña y eligiendo los distractores en base a los errores comunes de los estudiantes. Pero recuerde, el punto de los distractores es averiguar dónde los estudiantes tienen debilidades, para que podamos abordar estos errores de pensamiento.
  • Presta atención al lenguaje. Evite los errores gramaticales, ortográficos y mecánicos que pueden dificultar a los estudiantes incluso la determinación de las posibles respuestas.
  • Evite los términos categóricos: siempre, nunca. No existe el “siempre” o el “nunca”, y esto es un regalo.
  • Evite los dobles negativos (especialmente si Vladimir Putin está en su curso en línea…).
  • Los distractores deben iluminar las percepciones erróneas comunes de los estudiantes. Queremos ser capaces de diferenciar entre alumnos de alto nivel, medio y bajo nivel. Así que, de nuevo, tenemos que prestar especial atención a cómo los construimos.
  • Usar 4 respuestas posibles, no 3. Tres hace más probable que los estudiantes adivinen la respuesta correcta
  • Cada pregunta debe ser independiente. No relacione o conecte las preguntas. Queremos evitar el “doble peligro”, en el que si un alumno responde una pregunta incorrectamente, otra respuesta también será incorrecta.

Por último, recuerde que el punto de una prueba es la valide: determinar lo que los estudiantes realmente saben en lugar de ayudarles a “tener éxito” mediante el “juego” del sistema.

5. Benjamin Bloom es tu amigo. De verdad.

Una ve más, la Taxonomía de Bloom es un gran recurso para el diseño de evaluaciones. Nos da verbos que coinciden con los resultados del aprendiaje. Si no te gusta la Taxonomía de Bloom, y a muchos no les gusta (Así que los años 50… ¡los “Locos” de las taxonomías de aprendiaje!) puedes usar otras taxonomías de Marano y otros. Sea lo que sea que uses, una taxonomía de resultados de aprendiaje con el lenguaje que la acompaña ayudará a andamiar la creación de tu evaluación.

Desarrollar buenas evaluaciones en línea es difícil. Necesitamos saber por qué estamos evaluando. Las evaluaciones deben estar vinculadas a los resultados del aprendiaje y a las actividades de instrucción. Las evaluaciones exigen un lenguaje preciso, una buena cantidad de revisión y deben estar alineadas con los resultados del aprendiaje y las actividades de instrucción. Por encima de todo, necesitamos usar la herramienta de evaluación adecuada para medir la habilidad correcta. Sin estas prácticas, ni siquiera la mejor tecnología salvará una evaluación mal diseñada.

Referencias:

Commonwealth of Learning y Banco Asiático de Desarrollo (Eds.). (2008). Quality assurance in open and distance learning (Garantía de calidad en el aprendiaje abierto y a distancia): A toolkit. Vancouver, BC: Commonwealth of Learning y Manila, Filipinas: Banco Asiático de Desarrollo.

Dejar respuesta

Please enter your comment!
Please enter your name here

Información básica sobre protección de datos Ver más

  • Responsable los propietarios legales de editorialcomplutense.
  • Finalidad  Moderar los comentarios. Responder las consultas.
  • Legitimación Su consentimiento.
  • Destinatarios  contabo.
  • Derechos Acceder, rectificar y suprimir los datos.
  • Información Adicional Puede consultar la información detallada en la Política de Privacidad.