封闭数据集

MMLU-CF是微软亚洲研究院推出的一个新的多任务语言理解基准测试，旨在消除数据污染并提供更为公平、可靠的评估。该基准包含20,000道题目，涵盖14个学科领域，验证集公开透明，测试集闭源防泄露。研究人员通过去污染规则防止恶意数据泄露，并在Huggingface上开放了该数据集。