Esta información se aplica solo a la vista de cursos Ultra.

El análisis de preguntas proporciona estadísticas sobre el desempeño general, la calidad de las evaluaciones y las preguntas individuales. Esta información le sirve para reconocer aquellas preguntas que no ayudan a diferenciar el rendimiento de los estudiantes. El análisis de preguntas está destinado a las evaluaciones con preguntas. Si desea verificar la calidad de las preguntas y realizar cambios, puede ejecutar un informe antes de que se realicen todas las entregas.

Usos del análisis de preguntas:

  • Mejorar las preguntas para las evaluaciones futuras o para ajustar los créditos en los intentos actuales;
  • Debatir sobre los resultados de las evaluaciones con la clase;
  • Proporcionar una base para el trabajo correctivo.
  • Mejorar la enseñanza en el aula.

Ejemplo:

Tras el análisis de preguntas, nota que la mayoría de los estudiantes responden a una pregunta de forma incorrecta. ¿Por qué se registra esta tasa baja de éxito?

  • ¿La pregunta está expresada de un modo confuso?
  • ¿Son poco claras las opciones de respuesta?
  • ¿Los alumnos han recibido el contenido de aprendizaje correcto para responder correctamente esta pregunta?
  • ¿El contenido que había que aprender era claro y se podía acceder a él con facilidad?

En función de lo que descubra, puede mejorar la pregunta para que evalúe realmente el conocimiento de los estudiantes.


Acceder al análisis de una evaluación

Puede ejecutar un informe de análisis de preguntas anterior y acceder a él desde las siguientes áreas del curso:

  • Página Contenido del curso > menú de la evaluación
  • Página Análisis del curso > pestaña Análisis de preguntas, en el caso de las instituciones que habilitaron el análisis
  • Libro de calificaciones, vista de cuadrícula o lista

En la página Contenido del curso, acceda al menú de una evaluación y seleccione Análisis de preguntas. También puede seleccionar el ícono Análisis en la barra de navegación.

Highlighted question analysis option from a particular test menu.

De forma alternativa, puede ejecutar un informe de análisis de preguntas desde el libro de calificaciones en la vista de cuadrícula o lista. Acceda al menú de una evaluación y seleccione Análisis de preguntas.

Question analysis from a particular test menu.

Página Análisis de preguntas

Solo se puede acceder a la página Análisis de preguntas desde la barra de navegación > Análisis > página Análisis del curso > pestaña Análisis de preguntas.

This is how the question analysis from course analytics looks like.

Puede ejecutar un informe sobre una evaluación con entregas y sin preguntas, pero la información que obtenga no será útil.

Recibirá un mensaje que indica que el informe de análisis de preguntas está en curso y, una vez listo el informe, recibirá un correo electrónico. Puede dejar la página para trabajar en otras áreas del curso y luego volver para corroborar si el informe está listo.

An alert notifying that the question analysis report is under construction and will be sent via email when it is complete.

Columna Estado

Cada evaluación del curso aparece con uno de los siguientes estados:

  • Informe en curso
  • Completado el {fecha}
  • Datos no actualizados: la evaluación contiene ahora más entregas que se deben analizar.
  • Datos insuficientes: no contiene entregas. Opción Ejecutar informe deshabilitada.
  • Evaluación sin preguntas: la evaluación no contiene preguntas o entregas. Opción Ejecutar informe deshabilitada.
  • Sin estado: la evaluación contiene preguntas y entregas, pero no ha ejecutado ningún informe. Opción Ejecutar informe habilitada.
  • Error: ejecutar

Ver el resumen de evaluación de análisis de preguntas

Luego de ejecutar un informe, puede ver los detalles y la información de resumen general de cada pregunta. Seleccione la evaluación en la página Análisis de preguntas para ver el resumen.

En los cálculos, solo se utilizan los intentos enviados. Si hay intentos en curso, estos se omitirán hasta que se entreguen y se vuelva a ejecutar el informe de análisis. Las calificaciones con ceros automáticos para los trabajos atrasados no se incluyen en los cálculos.

Test summary with discrimination and difficulty purple bars and an option to select the review column so questions that need review appear first.
  1. Resumen de las estadísticas para la evaluación individual:
    • Puntuación promedio: la puntuación que se muestra es la puntuación promedio registrada para la evaluación en el libro de calificaciones. La puntuación promedio puede variar en caso de que se envíen y califiquen más intentos.
    • Preguntas posibles: la cantidad total de preguntas en la evaluación.
    • Intentos completados: la cantidad de evaluaciones enviadas.
    • Tiempo promedio empleado: el tiempo promedio de finalización de todos los intentos enviados.
  2. Vuelva a ejecutar un informe o edite la evaluación para modificar las preguntas.
  3. Use los gráficos para filtrar la tabla de preguntas. Seleccione elementos en ambos gráficos para acotar la búsqueda. Si no selecciona ningún elemento, aparecerán todas las preguntas en la tabla en la parte inferior de la página.
    • Discriminación: indica qué tan bien las preguntas permiten diferenciar entre los estudiantes que conocen el tema y los que no.
      • Muestra la cantidad de preguntas que entran en estas categorías:
        • Buena (superior a 0,3)
        • Aceptable (entre 0,1 y 0,3)
        • Insatisfactoria (inferior a 0,1)
        • No se puede calcular: la dificultad de la pregunta es del 100 % o todos los estudiantes recibieron la misma puntuación en la pregunta.
      • Las preguntas cuyos valores de discriminación entran en las categorías Buena y Aceptable permiten diferenciar entre estudiantes con niveles de conocimiento más y menos elevados.
      • Se recomienda revisar las preguntas de la categoría Insatisfactoria.
    • Dificultad: porcentaje de estudiantes que respondieron a las preguntas de forma correcta.
      • Muestra la cantidad de preguntas que entran en estas categorías:
        • Fácil (superior al 80 %)
        • Media (entre el 30 % y el 80 %)
        • Difícil (inferior al 30 %)
      • Se recomienda revisar las preguntas de las categorías Fácil y Difícil.
  4. Seleccione un encabezado para ordenar las preguntas. Por ejemplo, ordene la columna Revisión para que aparezcan primero las preguntan que se deben revisar.
  5. Borrar filtros: borre los filtros que seleccionó en los gráficos y muestre todas las preguntas en la tabla.
  6. Descargar el informe de análisis de preguntas

Acerca de la sección de preguntas en el resumen de la evaluación

La tabla de preguntas proporciona estadísticas de análisis para cada pregunta de la evaluación. Luego de usar los gráficos para filtrar la tabla de preguntas, puede ver y ordenar los resultados.

En general, las preguntas buenas entran en estas categorías:

  • Dificultad Media (entre el 30 % y el 80 %)
  • Valores de discriminación Buena o Aceptable (mayor que 0,1)

En general, las preguntas recomendadas para revisión entran en las siguientes tres categorías. Es posible que su calidad sea baja o que se hayan puntuado de manera incorrecta.

  • Dificultad: fácil (>80 %) o difícil (<30 %)
  • Valores de discriminación: insatisfactorios (<0,1)

Recordatorio: Si no selecciona ningún elemento, aparecerán todas las preguntas en la tabla en la parte inferior de la página.

This is how the test analysis questions table looks like.

Para investigar una pregunta específica, seleccione el título y revise los detalles de la pregunta.

En la tabla, se muestra la información de cada pregunta:

  • Necesita revisión: se activa cuando los valores de discriminación son menores que 0,1. También se activa si los valores de dificultad son superiores al 80 % (la pregunta era demasiado fácil) o inferiores al 30 % (la pregunta era demasiado difícil). Analice la pregunta para determinar si es necesario revisarla.
  • Pregunta modificada: se muestra cuando ejecutó un informe, modificó una parte de la pregunta y volvió a ejecutar el informe. También aparece en caso de que, al crear la evaluación, haya copiado la pregunta desde otra evaluación.

    Si aparece Sí en la columna Pregunta modificada de una pregunta, dicho Sí no se transfiere al archivar y restaurar el curso.

  • Discriminación: indica qué tan bien las preguntas permiten diferenciar entre los estudiantes que conocen el tema y los que no. Se considera que una pregunta es un buen discriminador cuando los estudiantes que responden las preguntas de forma correcta también obtienen un buen resultado en la evaluación. Los valores pueden oscilar entre -1,0 y +1,0. Si el valor de discriminación es menor que 0,1 o es negativo, las preguntas se marcarán para su revisión. Los valores de discriminación no se pueden calcular si la puntuación de dificultad de la pregunta es del 100 % o si todos los estudiantes obtienen la misma puntuación en una pregunta.

    Los valores de discriminación se calculan mediante el coeficiente de correlación de Pearson. X representa la puntuación de cada alumno en una pregunta e Y representa la puntuación de cada alumno en la evaluación.

    Mathematical formula of the Pearson correlation coefficient to calculate discrimination values.

    Estas variables son, respectivamente, la puntuación estándar, la media muestral y la desviación estándar muestral:

    The standard score, sample mean, and sample standard deviation are the core elements of the Pearson correlation coefficient to calculate discrimination values.
  • Dificultad: porcentaje de alumnos que respondió a la pregunta correctamente. El porcentaje de dificultad se indica junto con su categoría: Fácil (superior al 80 %), Media (entre el 30 % y el 80 %) y Difícil (inferior al 30 %). Los valores de dificultad pueden oscilar entre el 0 % y el 100 %. Un porcentaje alto indica que la pregunta era fácil. Las preguntas de las categorías fácil y difícil se marcan para su revisión.

    Los niveles de dificultad que son ligeramente superiores a la media entre azar y puntuaciones perfectas diferencian mejor a los alumnos que conocen bien el material examinado de los que no lo hacen. Los valores de dificultad alta no garantizan niveles altos de discriminación.

  • Número de intentos calificados: número de intentos de preguntas en las que se ha completado la calificación. Cuanto mayor sea el número de intentos calificados, más fiables serán las estadísticas calculadas.
  • Puntuación promedio: la puntuación que aparece es la puntuación promedio registrada para la evaluación en el libro de calificaciones. La puntuación promedio puede variar después de que se califiquen todos los intentos.

Ver detalles de una sola pregunta

Puede investigar las preguntas que estén marcadas para revisión y ver el desempeño de los estudiantes. En la tabla de preguntas de Análisis de preguntas, seleccione el título de una pregunta vinculada para acceder al resumen de la pregunta.

This is how a particular question analysis summary looks like.
  1. Una vez que acceda a una pregunta, use el menú del título de la pregunta para acceder a cualquier pregunta de la evaluación. Puede dirigirse a otras preguntas en orden en ambos lados de la página.
  2. En la tabla de resumen, se muestran estadísticas de la pregunta.
  3. Seleccione Editar evaluación para acceder a la evaluación y realizar cambios.
  4. Aparece el texto de la pregunta junto con las opciones de respuesta. Puede ver cuántos estudiantes eligieron cada opción de respuesta o el porcentaje de respuestas correctas. Por ejemplo, en una pregunta de correspondencia, verá el porcentaje de estudiantes que unió los pares de forma correcta. El texto de las preguntas aparece solo para las preguntas de ensayo.

Acerca de intentos múltiples, omisión de preguntas y edición de preguntas

El análisis se encarga de algunos escenarios comunes de las siguientes maneras:

  • Si los estudiantes realizan una evaluación varias veces, se usa el último intento enviado como entrada para el análisis. Cuando los estudiantes envíen otro intento, los análisis posteriores incluirán ese intento nuevo.
  • Las anulaciones del libro de calificaciones no afectarán los datos del análisis ya que el análisis genera datos estadísticos para las preguntas basados en los intentos completos de los estudiantes.
  • Al modificar una pregunta o calificarla de forma manual, debe volver a ejecutar el análisis para determinar si los cambios afectan a los datos.

Ejemplos

El análisis de preguntas puede servirle para mejorar las preguntas para las administraciones de evaluaciones futuras. También puede corregir preguntas equívocas o ambiguas de una evaluación en curso.

  • En una pregunta de opción múltiple, la misma cantidad de estudiantes eligió las respuestas A, B y C. Examine las opciones de respuesta para determinar si son ambiguas, si la pregunta es demasiado difícil o si no se trató el material previamente en clase.
  • Se recomienda revisar una pregunta porque entra dentro de la categoría de dificultad "difícil". Concluye que es una pregunta difícil, pero la conserva para evaluar de forma adecuada los objetivos del curso.
  • Una pregunta de varias opciones se marcada para su revisión. Más del 25 % superior de los estudiantes eligió la respuesta B, pero la respuesta correcta es la A. Se da cuenta de que no eligió la respuesta correcta al crear la pregunta. Edite la pregunta de la evaluación y esta se vuelve a calificar de manera automática.

Descargar el informe de análisis de preguntas

Puede descargar un informe para analizarlo o guardarlo para usarlo en el futuro. El archivo descargado incluye las columnas en el análisis en el curso, además de las columnas de desviación estándar y de error estándar. Los informes permanecen en el sistema durante 14 días.

Seleccione el ícono de descarga que se encuentra arriba de la tabla de preguntas de Análisis de preguntas. El formato de archivo predeterminado es XLS. También puede abrir el archivo en formato CSV.

Sample of a downloaded question analysis report.