仇恨言论检测印度语数据集HateSpeechDetectionHindiDataset-salmanasrin
数据来源:互联网公开数据
标签:仇恨言论, 印度语, 文本分类, 情感分析, 歧视性语言, 机器翻译, 语料库, 文本标注
数据概述:
该数据集包含来自互联网公开数据,记录了印度语(印地语)文本及其对应的仇恨言论标签。主要特征如下:
时间跨度:数据未明确标注时间,可视为静态文本语料库。
地理范围:数据主要针对印度及周边地区,反映了当地的社会文化环境下的仇恨言论。
数据维度:包括“test_case”(原始印地语文本)、“translated_text”(翻译后的英文文本)和“label”(仇恨言论标签)三个字段,适用于多语言仇恨言论检测任务。
数据格式:CSV格式,文件名为english - monolingual_functionalities.csv,方便数据读取与分析。
来源信息:数据集可能源于社交媒体、论坛或其他公开平台,并经过人工标注,以识别文本中的仇恨内容。
该数据集适用于仇恨言论检测、情感分析、多语言文本分类等相关研究。
数据用途概述:
该数据集具有广泛的应用潜力,特别适用于以下场景:
研究与分析:适用于仇恨言论检测、多语言文本分析、社会语言学等领域的研究,例如,对仇恨言论的传播模式、情感倾向进行分析。
行业应用:为社交媒体平台、内容审核机构提供数据支持,用于构建自动化的仇恨言论过滤系统,维护健康的在线社区环境。
决策支持:支持政府机构或非营利组织对仇恨言论的监测与干预,促进社会和谐稳定。
教育和培训:作为自然语言处理、文本挖掘等相关课程的实训材料,帮助学生和研究人员掌握仇恨言论检测技术。
此数据集特别适合用于研究印地语语境下的仇恨言论特征,并开发针对印度地区语言环境的文本分析模型,以提升对仇恨内容的识别能力。