LLM论文：ALCE （Enabling Large Language Models to Generate Text with Citations）

这是一篇RAG领域的文章，原文在这：https://aclanthology.org/2023.emnlp-main.398.pdf

具体工作内容：

数据集

有三个数据集，分别是

ALCE评估模型：

三方面评估

• 流畅度——MAUVE (Pillutla et al., 2021)
• 正确性——根据数据集特点，定制了三种评估方式，主要使用了召回率，正确率
• 引用质量——根据数据集特点，定制了三种评估方式，主要使用了召回率，正确率

检索生成方式

1. vanilla：提供模型可能包含答案的文章，写提示词告诉他要正确地引用
2. summ/snippet: 不提供完整的文章而是概要版或某一段，为了减少信息损失，还结合了INTERACT，模型可以选择是否去看一个浓缩版对应的完整的文章
3. inlinesearch： 不提供检索结果，允许模型调用搜索
4. closebook：不提供外部文章，让模型闭卷给出答案。