孟加拉语仇恨言论文本分类数据集BengaliHateSpeechTextClassificationDataset-asifabdullah
数据来源:互联网公开数据
标签:仇恨言论, 文本分类, 自然语言处理, 孟加拉语, 情感分析, 恶意文本检测, 多标签分类, 语言学
数据概述:
该数据集包含来自互联网的孟加拉语文本数据,记录了用于识别仇恨言论的文本示例。主要特征如下:
时间跨度:数据未标明具体时间,视作静态语料数据集使用。
地理范围:数据主要来源于孟加拉语使用区域,可能包括孟加拉国及其他孟加拉语使用者聚集地。
数据维度:包括“Label”(标签,指示文本的类别,如inciteful、political_comment等)、“Text”(文本内容)、“Token_Length”(文本的Token长度)、“Avg_Token_Length”(平均Token长度)等字段。
数据格式:CSV格式,文件名为data_without_personal_attack - combinecsv,便于文本处理和建模分析。
该数据集适合用于孟加拉语仇恨言论检测、情感分析、文本分类等研究。
数据用途概述:
该数据集具有广泛的应用潜力,特别适用于以下场景:
研究与分析:适用于自然语言处理、社会计算等领域的研究,如仇恨言论检测、情感分析、文本分类等。
行业应用:为社交媒体平台、在线论坛等提供数据支持,用于自动识别和过滤仇恨言论,维护社区环境。
决策支持:支持政府机构、非营利组织等进行社会舆情监测、风险评估,以及制定相关政策。
教育和培训:作为自然语言处理、机器学习等课程的实训素材,帮助学生和研究人员理解和应用文本分类技术。
此数据集特别适合用于探索孟加拉语语境下的仇恨言论表现形式,帮助用户构建和优化仇恨言论检测模型,改善网络环境。