open-compass/T-Eval

对数据集case数的疑问

Opened this issue · 2 comments

AmberXu98 commented

论文中写的case数为：
INSTRUCT 2660， RETRIEVE 6426， PLAN 553， REASON 6426， REVIEW 487， UNDERSTAND 6753， Total 23305

但下载的数据集中case数为：
INSTRUCT 2660， RETRIEVE 3413， PLAN 553， REASON 3413， REVIEW 487， UNDERSTAND 3540， Total 13113

其中RETRIEVE，REASON，UNDERSTAND三项存在差异，请问是什么原因？

AmberXu98 commented

Delete

Little-girl-1992 commented

https://huggingface.co/datasets/lovesnowbest/T-Eval/tree/main/data 不是这个数据集吗？我看里面都是553条