Comparación de enfoques para evaluar la validación de respuestas

  1. Rodrigo Yuste, Álvaro
  2. Peñas Padilla, Anselmo
  3. Verdejo Maíllo, María Felisa
Revista:
Procesamiento del lenguaje natural

ISSN: 1135-5948

Año de publicación: 2009

Número: 43

Páginas: 277-285

Tipo: Artículo

Otras publicaciones en: Procesamiento del lenguaje natural

Resumen

La Validación de Respuestas ha sido vista recientemente como un problema de clasificación donde se puede introducir aprendizaje automático con el propósito de mejorar los resultados de los sistemas de Búsqueda de Respuestas. La naturaleza no balanceada de las colecciones ha llevado al uso de medidas de evaluación basadas en precisión y cobertura. Sin embargo, para este tipo de evaluaciones se suele usar más análisis ROC (Relative Operating Characteristic). En este artículo se comparan ambos enfoques de acuerdo a sus fundamentos, su estabilidad en función del tamaño de las colecciones, su poder de discriminación y su adecuación a las particularidades de la Validación de Respuestas.