数据集概述
本数据集为Touché 2023会议争议问题论据检索任务的专用数据,包含5个文件,涵盖立场、质量、相关性评估文件、运行结果压缩包及主题文件,支持该任务的模型训练与评估。
文件详解
- .qrels文件(3个)
- 文件名称:touche-task1-2023-stance.qrels、touche-task1-2023-quality.qrels、touche-task1-2023-relevance.qrels
- 文件格式:.qrels
- 字段映射介绍:包含立场、质量、相关性三类评估数据,用于论据检索任务的结果评估
- 压缩包文件(1个)
- 文件名称:runs-task1.zip
- 文件格式:.zip
- 字段映射介绍:包含任务1的运行结果数据压缩包
- XML文件(1个)
- 文件名称:topics-task1.xml
- 文件格式:.xml
- 字段映射介绍:包含任务1的主题元数据文件
数据来源
Touché 2023 Argument Retrieval for Controversial Questions task
适用场景
- 论据检索模型评估: 用于验证和分析争议问题论据检索模型的立场匹配、质量评估及相关性排序性能
- 自然语言处理任务研究: 支持争议问题论据检索领域的算法开发与优化
- 文本评估标准研究: 基于.qrels文件探索论据检索任务的评估指标与标准制定
- 主题数据应用: 利用topics-task1.xml的元数据开展争议问题主题相关的文本分析