Buenas,
Con respecto a la parte 3.1), nos queda la duda de a qué se refiere con respuestas “más apropiadas”. Mas apropiadas sería sintácticamente correctas, o semánticamente correctas? Por ejemplo para la pregunta A2 “¿Por qué no reabrió la escuela 39 de Florida?”, el modelo responde “Algunas otras escuelas tuvieron problemas con las bombas de agua”. Leyendo el texto vimos que esa es la razón por la cual no abrió la escuela 39 de florida, aunque en la respuesta del sistema tal vez no queda del todo claro (ya que hace referencia a ‘algunas otras’ escuelas y no a la escuela de la pregunta en particular). ¿Una respuesta más apropiada sería algo como ‘La escuela 39 de Florida no reabrió porque tuvo problemas con las bombas de agua’? ¿Podría esperarse de un modelo como este que devuelva oraciones construidas por el modelo y que no estén en el texto original, o simplemente se limita a devolver partes textuales del texto de entrada?
Gracias!
Saludos
Hola,
Para el laboratorio tienen que analizar las respuestas que da el modelo y pensar cómo podrían mejorarlas en general (no una mejora específica para cada ejemplo). Como la idea es usar solamente un analizador sintáctico, lo que van a poder mejorar va a ser algo relacionado con la información sintáctica. Es decir, pueden lograr respuestas un poco más completas, o quizá más específicas. No van a poder resolver problemas puramente semánticos, como por ejemplo, identificar una respuesta que no tiene ninguna relación con la pregunta planteada y buscar una respuesta más relevante.
Este modelo está entrenado para devolver como respuesta un fragmento del texto que se le da como contexto de la pregunta, nunca genera texto nuevo. Para nuestra tarea también nos restringimos a este tipo de respuesta (siempre son fragmentos del contexto dado).
En el ejemplo particular que mencionan, la respuesta es incompleta ya que el texto dice "problemas con las bombas de agua u otras situaciones edilicias particulares".
Saludos,
Aiala
Para el laboratorio tienen que analizar las respuestas que da el modelo y pensar cómo podrían mejorarlas en general (no una mejora específica para cada ejemplo). Como la idea es usar solamente un analizador sintáctico, lo que van a poder mejorar va a ser algo relacionado con la información sintáctica. Es decir, pueden lograr respuestas un poco más completas, o quizá más específicas. No van a poder resolver problemas puramente semánticos, como por ejemplo, identificar una respuesta que no tiene ninguna relación con la pregunta planteada y buscar una respuesta más relevante.
Este modelo está entrenado para devolver como respuesta un fragmento del texto que se le da como contexto de la pregunta, nunca genera texto nuevo. Para nuestra tarea también nos restringimos a este tipo de respuesta (siempre son fragmentos del contexto dado).
En el ejemplo particular que mencionan, la respuesta es incompleta ya que el texto dice "problemas con las bombas de agua u otras situaciones edilicias particulares".
Saludos,
Aiala