Acceso usuarios
, Simona Frenda, Alejandro Ariza Casabona, Mireia Farrús i Cabeceran , Paolo Rosso , Mariona Taulé Delor
Este artículo presenta un resumen de la tarea DETESTS como parte del workshop IberLEF 2024, dentro del congreso SEPLN 2024. Propusimos dos subtareas jerárquicas: En la subtarea 1, los participantes tuvieron que determinar la presencia de estereotipos raciales en oraciones. En la subtarea 2, de las oraciones etiquetadas con estereotipo, los participantes tuvieron que decidir si este era implícito. El dataset DETESTS-Dis contiene 12.111 oraciones de comentarios y tuits respondiendo a artículos de periódicos y bulos raciales sobre inmigración en español. 15 equipos se registraron para participar, de los cuales 6 enviaron predicciones de sistemas y 3 de ellos enviaron artículos. En este artículo presentamos información sobre los datasets de entrenamiento y de prueba, los sistemas utilizados por los participantes, las métricas de evaluación y sus resultados.
This paper presents an overview of the DETESTS-Dis shared task as part of the IberLEF 2024 Workshop on Iberian Languages Evaluation Forum, within the framework of the SEPLN 2024 conference. We proposed two hierarchical subtasks: In subtask 1, participants had to determine the presence of stereotypes in the texts. For subtask 2, participants had to decide which texts labeled with stereotypes were implicit stereotypes. The DETESTS-Dis dataset contains 12,111 comment sentences and tweets in response to newspaper articles and verified racial hoaxes involving immigration in Spanish. 15 teams signed up to participate, 6 of which sent runs, and 3 of them sent their working notes. In this paper, we provide information about the training and test datasets, the systems used by the participants, the evaluation metrics of the systems and their results.
