阿拉伯语社交媒体仇恨言论检测数据集ArabicSocialMediaHateSpeechDetection-bensoltanerajae
数据来源:互联网公开数据
标签:仇恨言论, 社交媒体, 自然语言处理, 文本分类, 阿拉伯语, 情感分析, 机器学习, 数据标注
数据概述:
该数据集包含来自社交媒体平台的阿拉伯语文本数据,记录了用户发布的文本内容,并标注了其是否包含仇恨言论。主要特征如下:
时间跨度:数据未明确标注具体时间,可视为静态语料数据集。
地理范围:数据主要来源于阿拉伯语社交媒体,覆盖范围主要集中于阿拉伯语使用地区。
数据维度:包括文本内容(text)、以及关于仇恨言论的标注结果,包括subtask_a和subtask_c两个子任务的标注信息。
数据格式:CSV格式,包含 osacat-testcsv 和 osacat-traincsv 两个文件,便于文本分析和模型训练。
来源信息:数据来源于开源项目,已进行标注和初步处理。
该数据集适合用于仇恨言论检测、情感分析、文本分类等研究,以及相关模型的训练和评估。
数据用途概述:
该数据集具有广泛的应用潜力,特别适用于以下场景:
研究与分析:适用于自然语言处理、社会计算等领域的研究,例如仇恨言论识别、情感分析、偏见检测等。
行业应用:可以为社交媒体平台、内容审核机构提供数据支持,用于自动化内容审核、用户行为分析等。
决策支持:支持政府机构、非政府组织等在社会舆情监测、打击网络暴力方面的决策。
教育和培训:作为自然语言处理、机器学习等课程的实训数据,帮助学生理解仇恨言论检测技术。
此数据集特别适合用于构建和评估阿拉伯语仇恨言论检测模型,并探索不同标注任务对模型性能的影响。