EXIST-2024: Source Intention in memes (soft-soft)

Esta tarea pretende clasificar los memes sexistas según la intención del autor, lo que permite comprender el papel que desempeñan las redes sociales en la emisión y difusión de contenidos sexistas. En esta tarea, se propone una clasificación ternaria: direct, reported, judgemental. En esta tarea se contempla una evaluación soft-soft en la que se compara la probabilidad de cada etiqueta predicha por el sistema con la probabilidad definida a partir del desacuerdo en la anotación en el gold standard.

Publicación
Plaza, L. et al. (2024).EXIST 2024: sEXism Identification in Social neTworks and Memes. Experimental IR Meets Multilinguality, Multimodality, and Interaction. CLEF 2024. Lecture Notes in Computer Science, volume 14612
Idioma
Español
Inglés
NLP topic
Dataset
Año
2024
Métrica Ranking
ICMSoft

Mejores resultados para la tarea

Sistema ICM Soft Ordenar ascendente
Victor-UNED_2 -1.2660
MMICI_1 -1.3738
MMICI_2 -1.5329
NICA_1 -1.5907
CNLP-NITS-PP_1 -4.7893

Si has publicado un resultado mejor que los de la lista, envía un mensaje a odesia-comunicacion@lsi.uned.es indicando el resultado y el DOI del artículo, junto con una copia del mismo si no está publicado en abierto.