Publicação em atas de evento científico
Bypassing the Nuances of Portuguese Covert Hate Speech through Contextual Analysis
Gil Ramos (Ramos, G.); Fernando Batista (Batista, F.); Ricardo Ribeiro (Ribeiro, R.); Pedro Fialho (Fialho, P.); Sérgio Moro (Moro, S.); António Fonseca (Fonseca, A.); Rita Guerra (Guerra, R.); Paula Carvalho (Carvalho, P.); Catarina Marques (Marques, C.); Cláudia Silva (Silva, C.); et al.
Lecture Notes in Artificial Intelligence
Ano (publicação definitiva)
2024
Língua
Inglês
País
Portugal
Mais Informação
--
Web of Science®

Esta publicação não está indexada na Web of Science®

Scopus

Esta publicação não está indexada na Scopus

Google Scholar

Esta publicação não está indexada no Google Scholar

Abstract/Resumo
Detecting and addressing covert hate speech poses significant challenges in online platforms where discriminatory messages are often disguised within seemingly innocuous content. In this study, we investigate the effectiveness of contextual analysis in bypassing the nuances of covert hate speech. Our research explores the impact of prompt engineering and context addition on the classification of overt and covert hate speech across diverse target groups, including Roma, migrants, LGBTQ+, and individuals of African descent. Through experimental trials using generative models like GPT-3.5 and GPT-4, our findings reveal that the addition of context, not only improves the overall performance of the models in general hate speech (from 75.0% to 79.6% F1 score, for the positive class), but also significantly improves the classification of covert hate speech, increasing True Positives by 21.64% (absolute) compared to the 6.5% in overt hate speech. Despite these improvements, the addition of context also increased the number of False Positives, indicating that a further refinement is needed for this contextual analysis. Moreover, target group analysis demonstrates a correlation between the prevalence of covert hate speech and model performance.
Agradecimentos/Acknowledgements
--
Palavras-chave
hate speech,GPT,natural language processing
  • Ciências da Computação e da Informação - Ciências Naturais
  • Engenharia Eletrotécnica, Eletrónica e Informática - Engenharia e Tecnologia
  • Ciências da Comunicação - Ciências Sociais
  • Outras Ciências Sociais - Ciências Sociais
  • Línguas e Literaturas - Humanidades
Registos de financiamentos
Referência de financiamento Entidade Financiadora
CERV-2021-EQUAL (101049306) Comissão Europeia

Com o objetivo de aumentar a investigação direcionada para o cumprimento dos Objetivos do Desenvolvimento Sustentável para 2030 das Nações Unidas, é disponibilizada no Ciência-IUL a possibilidade de associação, quando aplicável, dos artigos científicos aos Objetivos do Desenvolvimento Sustentável. Estes são os Objetivos do Desenvolvimento Sustentável identificados pelo(s) autor(es) para esta publicação. Para uma informação detalhada dos Objetivos do Desenvolvimento Sustentável, clique aqui.