Meta AI推出多语言阅读理解数据集Belebele

Meta AI近日宣布，推出一款名为Belebele的多语言阅读理解数据集，可以直接比较模型对不同语言的理解程度。Belebele其中涵盖了122种语言，可以评估高、中、低资源语言的单语言和多语言模型。该数据集由基于FLORES-200段落的精心设计的多项选择题和答案组成，能够以高资源和低资源语言评估NLP系统和大型语言模型。由于Belebele是完全并行的，因此可以直接比较所有语言的模型性能。