TANQ(Table Answered Questions)是伦敦国王学院和谷歌联合构建的一个开放域问答数据集,要求从多个来源构建表格形式的答案。该数据集包含1395个问题,涵盖了简单、交集和组合三种类型,其中大部分问题需要应用至少一种额外技能,如过滤、数学运算或单位转换以生成答案。数据集的构建遵循了五步自动化收集流程,首先扩展QAMPARI问题,通过查询Wikidata知识图谱来增加额外的关系,然后从Wikipedia收集支持证据,接着使用PaLM-2评估证据并生成答案表格。随后通过PaLM-2模型对问题进行重述,以提高自然性,最后为了生成更具挑战性的问题,对TANQ问题进行了技能增强,如过滤、转换和近似计算。TANQ数据集适用于开发和评估能够处理多步推理、数学运算和单位转换等复杂任务的大模型。
详情请参见五号雷达:https://www.5radar.com/result?key=TANQ
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.