Diferencias

Muestra las diferencias entre dos versiones de la página.

--- es:manual:items:patron:llm [2025/11/24 23:50] – root
+++ es:manual:items:patron:llm [2025/11/25 07:20] (actual) – [Patrones LLM con ficheros] root
@@ Línea 115: / Línea 115: @@
 Pueden enviarse ficheros de tipo texto, aunque para ello, si no son excesivamente largos, puede optarse por el método descrito anteriormente, usando un único campo de respuesta.
-También pueden enviarse imágenes, que se adjuntan mediante un fichero, se guardan en el servidor de Siette y se envían al agente LLM incrustadas en la llamada. De esta forma puede pedirse al sistema LM que determine si se cumplen o no algunas condiciones que se imponen a la imagen.
+También pueden enviarse imágenes, que se adjuntan mediante un fichero, se guardan en el servidor de Siette y se envían al agente LLM incrustadas en la llamada. De esta forma puede pedirse al sistema LLM que determine si se cumplen o no algunas condiciones que se imponen a la imagen.
 Pueden emplearse patrones LLM simples o múltiples. Tras la carga del fichero y la respuesta del agente LLM, el comportamiento de Siette es igual que en los demás patrones.
@@ Línea 121: / Línea 121: @@
 === Ejemplo ===
-El siguiente ejemplo ilustra el funcionamiento de este sistema. Se pide que se dibuje un esquema de un [[wpes>autómata finito]] determinista y mínimo para reconocer el lenguaje de la expresión regular ab(ab)*. La pregunta se escribe con seis patrones a los que se les puede asignar distinta puntuación. Se asignan igualmente seis respuestas, a modo de patrones entre los que el agente LLM debe decidir cuales se cumplen.  La pregunta se marca como envio de fichero con el nombre "dibujo.png". La pregunta se mostrará de la siguiente manera:
+El siguiente ejemplo ilustra el funcionamiento de este sistema. Se pide que se dibuje un esquema de un [[wpes>autómata finito]] determinista y mínimo para reconocer el lenguaje de la [[wpes>expresión regular]] ''ab(ab)*''. La pregunta se escribe con seis patrones a los que se les puede asignar distinta puntuación. Se asignan igualmente seis respuestas, a modo de patrones entre los que el agente LLM debe decidir cuales se cumplen.  La pregunta se marca como envío de fichero con el nombre "dibujo.png". La pregunta se mostrará de la siguiente manera:
 {{ es:manual:items:patron:af-pregunta.png }}
@@ Línea 145: / Línea 145: @@
         todos los símbolos del alfabeto
-Nótese que en este caso no se adjunta el enunciado, ya que pondría en aviso al agente de lo que cabe esperar que contenga la imagen, y según las pruebas realizadas este predisposición de la IA no resulta adecuada en este caso. El campo ''<<respuesta>>'' se ha sustituido por el nombre de la imagen, que se adjunta también en la llamada de forma automática.
+El etiquetado de las opciones con números se hace de forma automática. El campo ''<<respuesta>>'' se ha sustituido por el nombre de la imagen, que se adjunta también en la llamada al sistema LLM. Nótese que en este caso no se adjunta el enunciado, ya que pondría en aviso al agente de lo que cabe esperar que contenga la imagen, y según las pruebas realizadas este predisposición de la IA no resulta adecuada en este caso.
 Al agente se le dan las siguientes instrucciones:
@@ Línea 168: / Línea 168: @@
 {{ es:manual:items:patron:af-correcto.png }}
-En este caso, todo parece haber funcionado correctamente, pero no siempre es así. En este ejemplo inicialmente se le mostraba el enunciado, y no se le pedía que describiera la imagen, por lo que se obtenían peores resultados. El estado actual de la IA dista de ser perfecto y sus capacidades de deducción son aún limitadas. Por consiguiente, será necesario ajustar las opciones y completar bien las instrucciones si se quieren obtener buenos resultados. El proceso de diseño de preguntas basadas en Patrones LLM requiere práctica y muchas pruebas. Igualmente, una vez que la preguntas ha dado por correcta, la interacción con diversas soluciones planteadas por los alumnos puede poner de manifiesto problemas en la corrección que deben arreglarse. Para ello pueden redefinirse las opciones o las instrucciones de manera y utilizar la opción de [[es:help_test_sessions#Acciones|volver a corregir]] las sesiones ya enviadas.
+En este caso, parece haber funcionado correctamente, pero ha fallado en algunas de las opciones en el caso del autómata parcialmente correcto. ((La diferencia es sutil, el lenguaje que reconoce este autómata es ''aba(ba)*'' puesto que el estado 2 no es un estado final, si lo fuera, tampoco sería correcto, ya que entonces el lenguaje reconocido sería ''ab(ab)*|ab(ab)*a'' )). En este ejemplo inicialmente se le mostraba el enunciado, y no se le pedía que describiera la imagen, por lo que se obtenían peores resultados. Por otra parte, la descripción de la imagen ayuda a saber si ha identificado correctamente el dibujo. El estado actual de la IA dista de ser perfecto y sus capacidades de deducción son aún limitadas. Por consiguiente, será necesario ajustar las opciones y completar bien las instrucciones si se quieren obtener buenos resultados. El proceso de diseño de preguntas basadas en Patrones LLM requiere práctica y muchas pruebas. Igualmente, una vez que la pregunta se ha dado por correcta, la interacción con diversas soluciones planteadas por los alumnos puede poner de manifiesto problemas en la corrección que deben arreglarse. Para ello pueden redefinirse las opciones o las instrucciones de manera que se consiga una mayor tasa de acierto; y utilizar la opción de [[es:help_test_sessions#Acciones|volver a corregir]] sobre las sesiones ya enviadas.
+Debe tomarse por tanto con precaución el uso de este tipo de preguntas, que actualmente están en fase experimental. En general en temas especializados como éste aun queda mucho margen de mejora.