Herramientas de usuario

Herramientas del sitio


es:manual:analisis:items:instancias

Diferencias

Muestra las diferencias entre dos versiones de la página.

Enlace a la vista de comparación

Ambos lados, revisión anteriorRevisión previa
Próxima revisión
Revisión previa
es:manual:analisis:items:instancias [2023/03/09 09:53] rootes:manual:analisis:items:instancias [2023/03/09 10:01] (actual) root
Línea 5: Línea 5:
 Para generar una instancia en concreto se utiliza una //semilla//, es decir un número real aleatorio en el intervalo $[0,1]$. Una vez que la instancia ha sido generada se le asigna un //identificador alfanumérico// de 32 caracteres, denominado //MD5//, único para esa instancia, que se obtiene a partir de la combinación de todos los caracteres del enunciado y las respuestas de la instancia.  Para generar una instancia en concreto se utiliza una //semilla//, es decir un número real aleatorio en el intervalo $[0,1]$. Una vez que la instancia ha sido generada se le asigna un //identificador alfanumérico// de 32 caracteres, denominado //MD5//, único para esa instancia, que se obtiene a partir de la combinación de todos los caracteres del enunciado y las respuestas de la instancia. 
  
-Dos //semillas// diferentes pueden dar lugar a una misma //instancia//. Esto se comprende fácilmente ya que en algunos casos el número de instancias posibles es limitado. Pensemos en una plantilla que propone sumar dos números naturales menores o iguale que 5. La combinación de todos los casos posibles solo generaría un máximo de 25 instancias diferentes. Dado que la //semilla// es un número aleatorio, algunas instancias se generarán mas que otras, pero en muchos casos habrá repeticiones de una misma //instancia//.+Dos //semillas// diferentes pueden dar lugar a una misma //instancia//. Esto se comprende fácilmente ya que en algunos casos el número de instancias posibles es limitado. Pensemos en una plantilla que propone sumar dos números naturales menores o iguale que 5. La combinación de todos los casos posibles solo generaría un máximo de 25 instancias diferentes. Dado que la //semilla// es un número aleatorio, algunas instancias se generarán más que otras, pero en muchos casos habrá repeticiones de una misma //instancia//.
  
 Resulta interesante analizar el comportamiento de las distintas instancias por varias razones: Resulta interesante analizar el comportamiento de las distintas instancias por varias razones:
     * Puede darse el caso de que aluna pregunta (instancia) generada a partir de la plantilla no sea correcta. Por ejemplo, supongamos una plantilla que pide hallar la ecuación de un circulo que pasa por tres puntos de coordenadas aleatórias. La plantilla generará una pregunta imposible si los tres puntos resultan estar alineados. En algunos casos, esta circunstancia puede preverse al diseñar la plantilla, pero hay casos en los que en la práctica no es posible o no se han tenido en cuenta estas singularidades.     * Puede darse el caso de que aluna pregunta (instancia) generada a partir de la plantilla no sea correcta. Por ejemplo, supongamos una plantilla que pide hallar la ecuación de un circulo que pasa por tres puntos de coordenadas aleatórias. La plantilla generará una pregunta imposible si los tres puntos resultan estar alineados. En algunos casos, esta circunstancia puede preverse al diseñar la plantilla, pero hay casos en los que en la práctica no es posible o no se han tenido en cuenta estas singularidades.
-    * Desde el punto de vista psicométrico, es deseable que todas las preguntas que se generen a partir de una misma plantilla tengan un comportamiento parecido, es decir, que si obtuviésemos los parámetros de las [[curvas características]] de las instancias, todas ellas fueran las mismas, o al menos similares. En Siette, al usar preguntas generativas por ejemplo dentro de un [[test adaptativo]], o para la [[evaluación según la TRI]], se hace esta hipótesis. Conviene verificar que se cumple a la luz de los datos de respuesta obtenidos.+    * Desde el punto de vista psicométrico, es deseable que todas las preguntas que se generen a partir de una misma plantilla tengan un comportamiento parecido, es decir, que si obtuviésemos los parámetros de las [[es:manual:analisis:irt:icc|curvas características]] de las instancias, todas ellas fueran las mismas, o al menos similares. En Siette, al usar preguntas generativas por ejemplo dentro de un [[es:manual:analisis:cat|test adaptativo]], o para la [[es:manual:analisis:irt|evaluación según la TRI]], se hace esta hipótesis. Conviene verificar que se cumple a la luz de los datos de respuesta obtenidos.
  
-En la subpestaña [[Instancias]] de la pestaña [[Sesiones]] se muestra una tabla que contiene todas las instancias que se han generado a partir de una [[pregunta generativa]]. +En la subpestaña [[es:help_items_sessions#Selección por instancias|Instancias]] de la pestaña [[es:help_items_sessions|Sesiones]] se muestra una tabla que contiene todas las instancias que se han generado a partir de una [[es:manual:items:generativos|pregunta generativa]]. 
  
 {{:es:manual:analisis:instancias.png}} {{:es:manual:analisis:instancias.png}}
Línea 34: Línea 34:
 Los valores que se muestran corresponden al análisis de cada instancia por separado, pero tienen como soporte únicamente los datos de las ocasiones en las que ha aparecido la misma instancia. En la imagen anterior se muestran los datos de una pregunta generativa que se ha usado muchas veces y que ha dado lugar a muchas instancias. Estadísticamente algunas de estas instancias han aparecido suficientes veces como para poder medir los índices de dificultad y discriminación, aunque muchas instancias (la mayoría) solo han aparecido en contadas ocasiones por lo que los datos no serían significativos.  Los valores que se muestran corresponden al análisis de cada instancia por separado, pero tienen como soporte únicamente los datos de las ocasiones en las que ha aparecido la misma instancia. En la imagen anterior se muestran los datos de una pregunta generativa que se ha usado muchas veces y que ha dado lugar a muchas instancias. Estadísticamente algunas de estas instancias han aparecido suficientes veces como para poder medir los índices de dificultad y discriminación, aunque muchas instancias (la mayoría) solo han aparecido en contadas ocasiones por lo que los datos no serían significativos. 
  
-En los casos en los que se crea que una instancia generada no es correcta, puede anularse desplazando el icono de control que aparece a la izquierda. Una instancia anulada se considera como una [[pregunta no evaluable]] en aquellas sesiones en las que haya aparecido, es decir, que no contabiliza para la calificación final. Además si se anula una instancia en concreto, ésta no volverá a aparecer en ningún nuevo test, ya que el sistema, antes de proponer la instancia como pregunta al alumno, comprueba que la instancia no este anulada, y si lo está genera otra distinta hasta encontrar alguna que no lo esté. ((Evidentemente, este mecanismo retrasa la ejecución si el porcentaje de instancias anuladas es alto, aunque si esto sucede, merecería la pena reformular la plantilla))+En los casos en los que se crea que una instancia generada no es correcta, puede anularse desplazando el icono de control que aparece a la izquierda. Una instancia anulada se considera como una [[es:help_items_evaluation#Pregunta evaluable|pregunta no evaluable]] en aquellas sesiones en las que haya aparecido, es decir, que no contabiliza para la calificación final. Además si se anula una instancia en concreto, ésta no volverá a aparecer en ningún nuevo test, ya que el sistema, antes de proponer la instancia como pregunta al alumno, comprueba que la instancia no este anulada, y si lo está genera otra distinta hasta encontrar alguna que no lo esté. ((Evidentemente, este mecanismo retrasa la ejecución si el porcentaje de instancias anuladas es alto, aunque si esto sucede, merecería la pena reformular la plantilla))
  
 === Instancias en preguntas no-generativas === === Instancias en preguntas no-generativas ===
es/manual/analisis/items/instancias.1678355592.txt.gz · Última modificación: 2023/03/09 09:53 por root

Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki