Esta tarea evalúa la capacidad de los sistemas para comprender un texto y seleccionar la respuesta correcta entre varias opciones posibles. Cada ejercicio presenta un texto acompañado de preguntas de opción múltiple, donde solo una respuesta es válida. El objetivo es medir la comprensión lectora automática en un formato tradicional ampliamente utilizado en evaluaciones humanas.
Publicación
Rodrigo, A. et al. 2025. Overview of PROFE at IberLEF 2025: Language Proficiency Evaluation. Procesamiento del Lenguaje Natural, 75, pp. 487-497.
Competición
Idioma
Español
URL Tarea
NLP topic
Dataset
Año
2025
Enlace publicación
Métrica Ranking
Accuracy
Mejores resultados para la tarea
| Sistema | Accuracy Ordenar ascendente |
|---|---|
| Vicomtech_ezotova | 0.9550 |
| JFra-Team_responder | 0.9300 |
| JFra-Team_multi_agent | 0.9290 |
| The Vikings_submission4_G2 | 0.9200 |
| SINAI_zero_shot_multiple_choice | 0.9110 |
