===== Criterios de evaluación ===== Se entiende por criterio de eavlaución el algoritmo por el cual a partir de las respuestas del alumno, dependiendo de las opciones de respuestas elegidas, se obtiene una calificación o //nivel de conocimiento estimado//. Siette utiliza tres clases de modelos, con algunas variantes para cada uno de ellos: ==== Evaluación porcentual ==== {{page>es:manual:test:tipos#Porcentual&noheader}} ==== Evaluación por puntos ==== {{page>es:manual:test:tipos#Por puntos&noheader}} === Evaluación por puntos sin penalización === Una variante del método de [[es:manual:test:tipos#Por puntos|evaluación por puntos]] consiste en aplicar el método de evaluación //por puntos// pero no aplicar nunca la puntuación negativa en caso de fallo, es decir todas las opciones de respuesta incorrectas puntuarán como 0. Por consiguiente todas las preguntas tendrán una puntuación positiva. En el caso en el que todas las preguntas valen 1 punto, este método se asemeja al método de evaluación porcentual, pero es capaz de asignar crédito parcial a las preguntas parcialmente correctas, por ejemplo las preguntas de respuesta múltiple. ==== Evaluación basada en la Teoría de respuesta al Ítem ==== Siette implementa la [[wpes>Teoría_de_respuesta_al_ítem|Teoría de Respuesta al Ítem]] paramétrica, también llamada "//Contínua//" y no-paramétrica o "//Discreta//". pudiendo pasar de una a otra mediante aproximaciones. El modelo de la TRI discreta es en definitiva un clasificador bayesiano, en el que se parte de una distribución a priori del nivel de conocimiento estimado del alumno $\theta$ en un instante $t$, $$p(\theta,t) = \{ p_0, p_1, p_2, p_3 .... p_K \}$$ para los $K$ niveles de conocimiento. Pra cada opción de respuesta $j$, se usan unas funciones llamadas //curvas características// asociadas a cada una de las opciones de respuesta, $ICC_j(u_j|\theta)$ que indican la probabilidad de elegir la opción $u_j$ dependiendo del nivel de conocimientos $\theta$ del alumno. Estas funciones permiten calcular la distribución del nivel a posteriori simplemente aplicando la regla de Bayes. $$p(\theta, t+1) = p(\theta|u_j) = \frac{p(\theta) ICC_j(u_j|\theta)}{\sum_{i=0}^{K}p(\theta_i) ICC_j(u_j|\theta_i)}$$ en donde el denominador no es mas que un factor de normalización para que la suma de todas las probabilidades sea 1. Una ve obtenida la distribución se puede estimar el nivel de conocimiento como un número real para poder dar una //calificación// del alumno en una escala determinada. Para ello hay dos formas: === Estimación mediante la media aritmética === Para una distribución $p(\theta) = \{ p_0, p_1, p_2, p_3 .... p_K \}$ el nivel estimado sería $$\hat\theta = \overline\theta = \frac{ \sum_{i=0}^{K} p_i }{K+1}$$ === Estimación mediante la noda === Una alternativa a la media para estimar el nivel estimado es usar la moda de la distribución, que siempre es un valor entero y coincide con el valor de máxima verosimilitud de la distribución: $$\hat\theta = \theta_k = \max_{i=0}^{K} p_i $$