在MMbench关闭测评服务后，是否还能正常测评MMbench

[zmingzhang]

MMBench在线评测服务于2026/03/31起停止运营，届时对应榜单不再更新。
之后有官方推荐的测评途径吗，或者是否考虑开源全部的test信息。

[shin-in-taek]

I'm also having the same issue with MMBench. Could you provide any updates on this?

[kennymckormick]

Hi, @zmingzhang @shin-in-taek ,

All testing splits of MMBench has been released, you can do the evaluation on the test split of MMBench with VLMEvalKit: https://github.com/open-compass/VLMEvalKit, with dataset name MMBench_TEST_CN_V11 or MMBench_TEST_EN_V11

[zmingzhang]

由于我自己已经构建了针对MMBench的测评，目前是针对dev进行划分的，并自行实现了并行代码，希望您能开源test的tsv文件。如您同意，不胜感激！

[kennymckormick]

由于我自己已经构建了针对MMBench的测评，目前是针对dev进行划分的，并自行实现了并行代码，希望您能开源test的tsv文件。如您同意，不胜感激！

https://opencompass.openxlab.space/utils/benchmarks/MMBench/MMBench_TEST_CN_V11.tsv
https://opencompass.openxlab.space/utils/benchmarks/MMBench/MMBench_TEST_EN_V11.tsv