EXIST-2024: Source Intention in tweets (soft-soft)

Esta tarea pretende clasificar los tuits sexistas según la intención del autor, lo que permite comprender el papel que desempeñan las redes sociales en la emisión y difusión de mensajes sexistas. En esta tarea, se propone una clasificación ternaria: direct, reported, judgemental. En esta tarea se contempla una evaluación soft-soft en la que se compara la probabilidad de cada etiqueta predicha por el sistema con la probabilidad definida a partir del desacuerdo en la anotación en el gold standard.

Publicación
Plaza, L. et al. (2024).EXIST 2024: sEXism Identification in Social neTworks and Memes. Experimental IR Meets Multilinguality, Multimodality, and Interaction. CLEF 2024. Lecture Notes in Computer Science, volume 14612
Idioma
Español
Inglés
NLP topic
Dataset
Año
2024
Métrica Ranking
ICMSoft

Mejores resultados para la tarea

Sistema ICM Soft Ordenar ascendente
NYCU-NLP_2 -0.2543
NYCU-NLP_1 -0.4059
NYCU-NLP_3 -0.5226
BAZI_1 -1.3468
Victor-UNED_2 -1.6440

Si has publicado un resultado mejor que los de la lista, envía un mensaje a odesia-comunicacion@lsi.uned.es indicando el resultado y el DOI del artículo, junto con una copia del mismo si no está publicado en abierto.