xsmingerfan关于ds v4.1的注意力,我测试了MRCR v2 中发帖

在论坛回复他人的时候,我看见有人提到ds v4.1的注意力相比前代有所下降,遂进行了一下MRCR v2的8 needle测试。至于什么是MRCR v2,以下是G老师的解释: 
[image]
MRCR v2是对大模型上下文能力的一项有效测试,GPT,Claude,Gemini等模型公司基本上都会在报告中测试这个能力。第三方网站https://contextarena.ai/也会对这些模型进行测试。DeepSeek在V4 Pro和V4 Flash中同样进行了相应的测试,不过不知道为什么,在V4.1 flash的报告中,并没有这个bench,第三方网站数据似乎也没有更新V4.1 flash的数据。
那就由我来吧测试给补上吧。我在DSH中,让V4.1 flash帮我做了这项工作,并让它对比了一下前代模型,国模以及GPT上一代旗舰模型GPT 5.6-sol的数据。
[image]
这个...