阿里魔搭社区宣布开源Ziya-Reader。
Ziya-Reader 是一个针对知识检索的开源模型。当前大模型在处理多文档任务时,如果正确答案不在第一个或末尾的文档中,准确率会急剧下降。为了解决这个问题,Ziya-Reader 应运而生,它可以从多个候选中找到正确的答案。
在多个长文本任务的评测中,Ziya-Reader 表现优秀,取得了第一的成绩。它在中文多文档问答任务中超过了 ChatGLM2-6B-32k 和 GPT3.5-turbo-16k,RougeL最高达到45.1%。
此外,在中文合成任务和长文档摘要生成任务中,Ziya-Reader 同样表现出色。除了 Ziya-Reader,团队还自建了向量检索模型,并测试了整个搜索系统流水线的效果,结果超越了 OpenAI。