NowwwW (@NeXT) 在 竟然还能这么测模型能力吗??? 中发帖
起因是刷到 Karpathy 大佬转载的一篇用“画地球”来测模型能力的帖子,感觉挺有意思的。
方法挺简单的,就是取大量经纬度坐标,挨个问模型“某某某坐标是陆地还是水?”。
然后问 16200 次就可以画出一张模型认为的 🌏 地图。
▶
X 截图
看了看 A\ 家模型的结果,似乎真能测出来些啥?
Sonnet 4.5 和 Haiku 4.5 都拉完了。到 4.6 代之后感觉地图突然就成型了。
Fable 级和 Opus 5.5 又跟其他的拉开了差距。
到 Opus 5.5 基本就是完全复刻了。
[image]
然后自己用百炼的 1M 免费额度测了一些国产模型,还测了下 用不完了发点福利,50000刀jev模型随便用 里面的 jev(感谢佬),测一个大概消耗 0.7 ~ 1.2M token。
deepseek-v4.1-flash 果然真神。从 v4 到 v4.1 ...