Saltar al contenido principal
pdf?stylesheet=default
Blackboard Help

Análisis de elementos

El análisis de elementos proporciona estadísticas sobre el rendimiento general de pruebas y preguntas de prueba individuales. Esta información le sirve para reconocer aquellas preguntas que no ayudan a diferenciar el rendimiento de los alumnos. Puede utilizar esta información a fin de mejorar las preguntas para la administración futura de las pruebas o para ajustar el crédito en los intentos actuales.

Los roles que disponen de privilegios de calificación (profesores, calificadores y profesores asistentes) pueden acceder al análisis de elementos desde tres ubicaciones del flujo de evaluación. Se encuentra disponible en el menú contextual de:

  • Pruebas implementadas en un área de contenido.
  • Pruebas implementadas que se muestran en la página Pruebas.
  • Columnas del centro de calificaciones.

Los análisis de elementos se pueden ejecutar en pruebas implementadas con intentos enviados, pero no en sondeos. Acceda a los análisis de elementos ejecutados previamente bajo el encabezado Análisis disponible o seleccione una prueba implementada en la lista desplegable y haga clic en Ejecutar para generar un informe nuevo. El enlace del nuevo informe aparece bajo el encabezado Análisis disponible o en la confirmación de estado situada en la parte superior de la página.

Para obtener los mejores resultados, ejecute los análisis de elementos en pruebas de intento único después de que se hayan enviado todos los intentos y se hayan puntuado todas las preguntas de calificación manual. Interprete cuidadosamente los datos del análisis de elementos. Tenga en cuenta que las estadísticas están influenciadas por el número de intentos de prueba, el tipo de alumnos que realizan la prueba y los errores fortuitos.

Cómo ejecutar un análisis de elementos en una prueba

Puede ejecutar análisis de elementos en pruebas que incluyan intentos únicos o múltiples, conjuntos de preguntas, bloques aleatorios, tipos de preguntas de calificación automática y preguntas que necesitan calificación manual. En pruebas de preguntas calificadas manualmente a las que aún no se les haya asignado puntuaciones, las estadísticas se generarán únicamente para las preguntas puntuadas. Después de calificar manualmente las preguntas, ejecute de nuevo el análisis de elementos. Se generarán las estadísticas de las preguntas calificadas manualmente y se actualizarán las estadísticas de resumen de prueba.

  1. Vaya a una de las siguientes ubicaciones para acceder al análisis de elementos:
    • Pruebas implementadas en un área de contenido.
    • Pruebas implementadas que se muestran en la página Pruebas.
    • Una columna del centro de calificaciones de una prueba.
  2. Acceda al menú contextual de la prueba.
  3. Seleccione Análisis de elementos.
  4. En la lista desplegable Seleccione una prueba, seleccione una prueba. Solo se enumeran las pruebas implementadas.
  5. Haga clic en Ejecutar.
  6. Para ver el análisis de elementos, haga clic en el enlace del nuevo informe debajo del encabezado de Análisis disponible o haga clic en Ver análisis en la confirmación de estado de la parte superior de la página.

Acerca del resumen de prueba en la página de análisis de elementos

El Resumen de prueba se encuentra ubicado en la parte superior de la página Análisis de elementos y proporciona datos sobre el conjunto de la prueba.

  1. Editar prueba proporciona acceso al Lienzo de la prueba.
  2. El Resumen de prueba presenta estadísticas de la prueba, como, por ejemplo:
    • Puntos posibles: El número total de puntos en la prueba.
    • Preguntas posibles: El número total de preguntas en la prueba.
    • Intentos en proceso: El número de alumnos que están realizando la prueba actualmente y que todavía no la han enviado.
    • Intentos completados: El número de pruebas enviadas.
    • Puntuación promedio: las puntuaciones marcadas con un * indican que algunos intentos no están calificados y que la puntuación promedio podría cambiar una vez que todos los intentos se hayan calificado. La puntuación que aparece aquí es la puntuación promedio recogida para la prueba en el centro de calificaciones.
    • Tiempo medio: tiempo medio de finalización de todos los intentos enviados.
    • Discriminación: esta área muestra el número de preguntas que entran en las categorías Buena (más de 0,3), Aceptable (entre 0,1 y 0,3) e Insatisfactoria (menos de 0,1). Un valor de discriminación se marca como No se puede calcular si la puntuación de dificultad de la pregunta es de 100 % o si todos los alumnos reciben la misma puntuación en una pregunta. Las preguntas cuyos valores de discriminación son Buena y Aceptable diferencian mejor entre alumnos con niveles de conocimiento más elevados y menos elevados. Es recomendable revisar las preguntas de la categoría Insatisfactoria.
    • Dificultad: esta área muestra el número de preguntas que entran en las categorías Fácil (más del 80%), Media (entre el 30 y el 80%) y Difícil (menos del 30%). La dificultad es el porcentaje de alumnos que respondió a la pregunta correctamente. Las preguntas de las categorías Fácil o Difícil se indican mediante un círculo rojo y se recomienda su revisión.

      En los cálculos de análisis de elementos solo se utilizan intentos calificados. Si hay intentos en curso, dichos intentos se omitirán hasta que sean enviados y se vuelva a ejecutar el informe de análisis de elementos.

Acerca de la tabla de estadísticas de preguntas en la página de análisis de elementos

La tabla de estadísticas de preguntas proporciona estadísticas de análisis para cada pregunta de la prueba. Las preguntas que se recomienda revisar están indicadas mediante círculos rojos para que pueda identificarlas rápidamente.

En general, las buenas preguntas tienen:

  • Una dificultad media (30 % a 80 %).
  • Valores de discriminación buena o aceptable (mayor que 0,1).

Las preguntas que se recomienda revisar están indicadas con un círculo rojo. Es posible que su calidad sea baja o que se hayan puntuado de manera incorrecta. En general, las preguntas recomendadas tienen:

  • Grado de dificultad Fácil (> 80%) o Difícil (< 30%).
  • Valores de discriminación insatisfactoria (< 0,1).
  1. Filtre la tabla de preguntas por tipo de pregunta, categoría de discriminación y categoría de dificultad.
  2. Investigue una pregunta concreta haciendo clic en su título y revisando la página Detalles de pregunta.
  3. La tabla muestra estadísticas de cada pregunta, incluyendo:
    • Discriminación: indica lo bien que una pregunta diferencia entre alumnos que conocen el tema de los que no. Una pregunta es una buena discriminadora cuando los alumnos que responden correctamente a la pregunta obtienen también un buen resultado en la prueba. Los valores pueden oscilar entre -1,0 y +1,0. Si el valor de discriminación es menor que 0,1 o negativo, las preguntas se marcarán para su revisión. Los valores de discriminación no se pueden calcular si la puntuación de dificultad de la pregunta es de 100 % o si todos los alumnos obtienen la misma puntuación en una pregunta.

      Los valores de discriminación se calculan mediante el coeficiente de correlación de Pearson. X representa la puntuación de cada alumno en una pregunta e Y representa la puntuación de cada alumno en la evaluación.

      Las variables siguientes son, respectivamente, la puntuación estándar, la media muestral y la desviación estándar muestral:

    • Dificultad: porcentaje de alumnos que respondió a la pregunta correctamente. Los valores de dificultad pueden oscilar entre 0 % y 100 %. Un porcentaje elevado indica que la pregunta era sencilla. Las preguntas de las categorías Fácil (mayor que 80 %) o Difícil (menos que 30 %) se marcarán para su revisión.

      Los niveles de dificultad que son ligeramente superiores a la media entre azar y puntuaciones perfectas diferencian mejor a los estudiantes que conocen bien el material examinado de los que no lo hacen. Es importante tener presente que los valores de dificultad no garantizan un alto nivel de discriminación.

    • Número de intentos calificados: número de intentos de preguntas en las que se ha completado la calificación. Cuanto mayor sea el número de intentos calificados, más fiables serán las estadísticas calculadas.
    • Puntuación promedio: las puntuaciones marcadas con un * indican que algunos intentos no están calificados y que la puntuación promedio podría cambiar una vez que todos los intentos se hayan calificado. La puntuación que aparece aquí es la puntuación promedio recogida para la prueba en el centro de calificaciones.
    • Desviación estándar: medición de la cantidad de desviación de las puntuaciones con respecto a la puntuación promedio. Si las puntuaciones están agrupadas estrechamente, con la mayoría de los valores cerca del promedio, la desviación estándar es pequeña. Si los datos establecidos están muy dispersos, con los valores alejados del promedio, la desviación estándar es mayor.
    • Error estándar: estimación de la cantidad de variabilidad en la puntuación de un alumno debida a la casualidad. Cuanto menor sea el error estándar de medición, más exacta será la medición será la medición proporcionada por la pregunta de la prueba.

Cómo ver detalles de pregunta de una única pregunta

Puede analizar una pregunta que esté marcada para revisión. Para ello, acceda a su página Detalles de pregunta. Esta página muestra el rendimiento de los alumnos en la pregunta de prueba individual que haya seleccionado.

  1. En la página Análisis de elementos, desplácese hacia abajo hasta la tabla de estadísticas de preguntas.
  2. Seleccione el título de una pregunta vinculada para ver la página Detalles de pregunta.
  1. Use las flechas para desplazarse por las preguntas de manera secuencial o para saltar a la primera o a la última pregunta.
  2. Haga clic en Editar prueba para acceder al Lienzo de la prueba.
  3. La tabla de resumen muestra estadísticas de la pregunta, incluyendo:
    • Discriminación: indica lo bien que una pregunta diferencia entre alumnos que conocen el tema de los que no. La puntuación de discriminación se indica junto con su categoría: Insatisfactoria (menos que 0,1), Aceptable (0,1 a 0,3) y Buena (mayor que 0,3). Una pregunta es una buena discriminadora cuando los alumnos que responden correctamente a la pregunta obtienen también un buen resultado en la prueba. Los valores pueden oscilar entre -1,0 y +1,0. Si el valor de discriminación es menor que 0,1 o negativo, las preguntas se marcarán para su revisión. Los valores de discriminación no se pueden calcular si la puntuación de dificultad de la pregunta es de 100 % o si todos los alumnos obtienen la misma puntuación en una pregunta.

      Los valores de discriminación se calculan mediante el coeficiente de correlación de Pearson. X representa la puntuación de cada alumno en una pregunta e Y representa la puntuación de cada alumno en la evaluación.

      Las variables siguientes son, respectivamente, la puntuación estándar, la media muestral y la desviación estándar muestral:

    • Dificultad: porcentaje de alumnos que respondió a la pregunta correctamente. El porcentaje de dificultad se indica junto con su categoría: Fácil (mayor que 80 %), Media (30 % a 80 %) y Difícil (menor que 30 %). Los valores de dificultad pueden oscilar entre 0 % y 100 %. Un porcentaje elevado indica que la pregunta era sencilla. Las preguntas de las categorías fácil y difícil se marcan para su revisión.

      Los niveles de dificultad que son ligeramente superiores a la media entre azar y puntuaciones perfectas diferencian mejor a los estudiantes que conocen bien el material examinado de los que no lo hacen. Es importante tener presente que los valores de dificultad no garantizan un alto nivel de discriminación.

    • Número de intentos calificados: número de intentos de preguntas en las que se ha completado la calificación. Cuanto mayor sea el número de intentos calificados, más fiables serán las estadísticas calculadas.
    • Puntuación promedio: las puntuaciones marcadas con un * indican que algunos intentos no están calificados y que la puntuación promedio podría cambiar una vez que todos los intentos se hayan calificado. La puntuación que aparece aquí es la puntuación promedio recogida para la prueba en el centro de calificaciones.
    • Desviación estándar: medición de la cantidad de desviación de las puntuaciones con respecto a la puntuación promedio. Si las puntuaciones están agrupadas estrechamente, con la mayoría de los valores cerca del promedio, la desviación estándar es pequeña. Si los datos establecidos están muy dispersos, con los valores alejados del promedio, la desviación estándar es mayor.
    • Error estándar: estimación de la cantidad de variabilidad en la puntuación de un alumno debida a la casualidad. Cuanto menor sea el error estándar de medición, más exacta será la medición será la medición proporcionada por la pregunta de la prueba.
    • Omitido: número de alumnos que no respondieron a esta pregunta.
  4. Se muestran las opciones de texto y respuesta de la pregunta. La información varía en función del tipo de pregunta:
Información de análisis de elementos proporcionada en relación con los tipos de preguntas
Tipo de información proporcionada Tipos de pregunta
Número de alumnos que seleccionaron cada opción de respuesta

Y

distribución las respuestas entre cuartiles de clase.

Varias opciones

Respuesta múltiple

Verdadero/Falso

Dos opciones excluyentes

Escala de opinión/Likert

Número de alumnos que seleccionaron cada opción de respuesta. Correspondencia

Ordenación

Rellenar los espacios en blanco con varias opciones

Número de alumnos que respondieron a la pregunta de manera correcta, incorrecta o que la omitieron. Formula calculada

Numérica calculada

Rellenar el espacio en blanco

Zona activa

Copa de pruebas

Solo texto de la pregunta. Redacción

Respuesta de archivo

Respuesta breve

Oración confusa (también incluye las respuestas entre las que eligieron los alumnos)

Distribución de respuestas

La distribución de respuestas entre cuartiles de clase se facilita para los siguientes tipos de pregunta: varias opciones, verdadero/falso, dos opciones excluyentes y escala de opinión/Likert. La distribución muestra los tipos de alumnos que seleccionaron las respuestas correctas o incorrectas.

  • 25 % superior: número de alumnos con puntuaciones de prueba totales situadas en el cuarto superior de la clase que seleccionaron la opción de respuesta.
  • Segundo 25 %: número de alumnos con puntuaciones de prueba totales situadas en el segundo cuarto de la clase que seleccionaron la opción de respuesta.
  • Tercer 25 %: número de alumnos con puntuaciones de prueba totales situadas en el tercer cuarto de la clase que seleccionaron la opción de respuesta.
  • 25 % inferior: número de alumnos con puntuaciones de prueba totales situadas en el cuarto inferior de la clase que seleccionaron la opción de respuesta.

Leyenda de símbolos

Los símbolos que aparecen junto a las preguntas le avisan de posibles problemas:

  • Revisión recomendada: esta condición se activa cuando los valores de discriminación son menores que 0,1 o cuando los valores de dificultad son mayores que 80 % (la pregunta era demasiado fácil) o menores que 30 % (la pregunta era demasiado difícil). Examine la pregunta para determinar si es necesario revisarla.
  • La pregunta puede haber cambiado después de la implementación: indica que una parte de la pregunta ha cambiado desde que se implementó la prueba. Si se cambia cualquier parte de una pregunta después de que se haya implementado la prueba, es posible que los datos de esa pregunta no sean fiables. Es posible que los intentos enviados tras modificar la pregunta se hayan beneficiado del cambio. Este indicador le ayuda a interpretar los datos teniendo esto en cuenta.

    Este indicador no se muestra en cursos restaurados.

  • Hay intentos sin calificar: aparece cuando una prueba contiene preguntas que requieren calificación manual como, por ejemplo, las preguntas de redacción. Si una prueba contiene una pregunta de redacción con 50 intentos de alumnos, este indicador aparecerá hasta que el profesor califique los 50 intentos. La herramienta análisis de elementos utiliza solamente los intentos que estén calificados en el momento en que se ejecuta el informe.
  • (CP) y (BA): indica que una pregunta procede de un conjunto de preguntas o de un bloque aleatorio. Debido a la entrega de preguntas aleatoria, es posible que algunas preguntas obtengan más intentos que otras.

Acerca del análisis de elementos y varios intentos, omisión de preguntas y edición de preguntas

La herramienta de análisis de elementos gestiona los intentos varios, las omisiones y otros escenarios comunes del modo siguiente:

  • Si los alumnos pueden realizar una prueba varias veces, el último intento enviado se usa como entrada para el análisis de elementos. Pongamos por ejemplo una prueba que permite tres intentos en la que el Alumno A ha finalizado dos intentos y está realizando un tercer intento. El intento actual del Alumno A se contabilizará en el número que aparece en Intento en proceso y ninguno de los intentos anteriores del Alumno A se incluirá en los datos del análisis de elementos actual. Cuando el Alumno A envíe el tercer intento, los posteriores análisis de elementos incluirán ese tercer intento del Alumno A.
  • Las omisiones del centro de calificaciones no afectarán a los datos del análisis de elementos, ya que la herramienta de análisis genera datos estadísticos para preguntas basados en los intentos completados de los alumnos.
  • Las preguntas calificadas manualmente o los cambios realizados en el texto de una pregunta, la opción de la respuesta correcta, el crédito parcial o los puntos no se actualizan automáticamente en el informe de análisis de elementos. Vuelva a ejecutar el análisis para ver si los cambios afectan a los datos del análisis de elementos.

Ejemplos

El análisis de elementos puede servirle para mejorar las preguntas en futuras pruebas o para corregir preguntas equívocas o ambiguas de una prueba en curso. Algunos ejemplos son:

  • Al investigar una pregunta de varias opciones que estaba marcada para revisión en la página de análisis de elementos, descubre que la mayoría de alumnos de la categoría 25 % superior elijen la respuesta B, a pesar de que la respuesta correcta era la A. Al revisarla, se percata de que cometió un error al definir la respuesta correcta durante la creación de la pregunta. A continuación, edita la pregunta de la prueba y se vuelve a calificar de manera automática.
  • En una pregunta de varias opciones, descubre que el número de alumnos que eligieron A, B y C es prácticamente el mismo. Examine las opciones de respuesta para determinar si eran demasiado ambiguas, si la pregunta era demasiado difícil o si el material no se había tratado.
  • Se recomienda revisar una pregunta porque entra dentro de la categoría de dificultad “difícil”. Al examinar la pregunta, concluye que es una pregunta difícil pero la mantiene en la prueba porque resulta necesaria para probar adecuadamente los objetivos del curso.