@lzfxxx 在 关于融合测试里糖果题的讨论:是在考注意力,还是题目存在歧义? 中发帖

最近试了社区里的“鹈鹕骑自行车+孙悟空开飞机+秦始皇骑北极熊打螺丝+糖果题”融合测试,有一点疑惑,想听听大家的看法。 
原题链接:GPT最新多合一降智测试,鹈鹕在孙悟空的飞机上驮着秦始皇骑北极熊打螺丝,嘴里喊出糖果测试答案
我用的都是 Astra low。原版融合提示词里,糖果题答的是 29,SVG 能画出来,但效果一般;稍微改了一下提示词之后,糖果答出了 21,绘画效果也不错。单独问糖果题可以答对,tibo 和日本首相的题也都能答对。
修改主要集中在两处:把“不同的形状靠手感可以分辨”补充为“允许在袋内按形状挑选,但无法辨认口味,已取出的糖果不能放回”;把提前决定“摸出的糖果数目”,改成提前决定“分别摸出多少颗圆形糖果和五角星形糖果”。另外加了不能写代码计算的限制。
这让我想到两个可能的解释。
一种是关键条件没有被注意到。原题已经给了“靠手感可以分辨”,需要模型自己意识到,这意味...