Ciência-IUL
Publicações
Descrição Detalhada da Publicação
Bypassing the Nuances of Portuguese Covert Hate Speech through Contextual Analysis
Lecture Notes in Artificial Intelligence
Ano (publicação definitiva)
2024
Língua
Inglês
País
Portugal
Mais Informação
--
Web of Science®
Esta publicação não está indexada na Web of Science®
Scopus
Esta publicação não está indexada na Scopus
Google Scholar
Esta publicação não está indexada no Google Scholar
Abstract/Resumo
Detecting and addressing covert hate speech poses significant challenges in online platforms where discriminatory messages are often disguised within seemingly innocuous content. In this study, we investigate the effectiveness of contextual analysis in bypassing the nuances of covert hate speech. Our research explores the impact of prompt engineering and context addition on the classification of overt and covert hate speech across diverse target groups, including Roma, migrants, LGBTQ+, and individuals of African descent. Through experimental trials using generative models like GPT-3.5 and GPT-4, our findings reveal that the addition of context, not only improves the overall performance of the models in general hate speech (from 75.0% to 79.6% F1 score, for the positive class), but also significantly improves the classification of covert hate speech, increasing True Positives by 21.64% (absolute) compared to the 6.5% in overt hate speech. Despite these improvements, the addition of context also increased the number of False Positives, indicating that a further refinement is needed for this contextual analysis.
Moreover, target group analysis demonstrates a correlation between the prevalence of covert hate speech and model performance.
Agradecimentos/Acknowledgements
--
Palavras-chave
hate speech,GPT,natural language processing
Classificação Fields of Science and Technology
- Ciências da Computação e da Informação - Ciências Naturais
- Engenharia Eletrotécnica, Eletrónica e Informática - Engenharia e Tecnologia
- Ciências da Comunicação - Ciências Sociais
- Outras Ciências Sociais - Ciências Sociais
- Línguas e Literaturas - Humanidades
Registos de financiamentos
Referência de financiamento | Entidade Financiadora |
---|---|
CERV-2021-EQUAL (101049306) | Comissão Europeia |
Contribuições para os Objetivos do Desenvolvimento Sustentável das Nações Unidas
Com o objetivo de aumentar a investigação direcionada para o cumprimento dos Objetivos do Desenvolvimento Sustentável para 2030 das Nações Unidas, é disponibilizada no Ciência-IUL a possibilidade de associação, quando aplicável, dos artigos científicos aos Objetivos do Desenvolvimento Sustentável. Estes são os Objetivos do Desenvolvimento Sustentável identificados pelo(s) autor(es) para esta publicação. Para uma informação detalhada dos Objetivos do Desenvolvimento Sustentável, clique aqui.