wujunyyds 在 【干货】GPT6降智现象和行为分析 中发帖
背景:
最近在开发软件时被GPT降智搞得有亿点崩溃,不管是GPT 6 Astra还是GPT 6.1 Sol,几乎所有的中转站全都在降智,而且几乎是没有规律的降智,但我也因此获得了一些经验用于分辨GPT是否降智以及如何尽可能规避降智,故作此文对GPT的降智现象和行为进行分析。
模型降智现象和分辨方法:
现象:
据笔者所观察,模型的降智表现主要为1.未完成任务就结束,写的代码一大堆问题2.工具调用经常出现错误3.会出现一些莫名其妙的工具调用信息(后文会提到)
分辨方法:
目前流行的分辨方法主要为画鹦鹉、问juice值、问日本首相问题等。三种方法理论上都可行,但由于画鹦鹉需要较长时间且新手小白不容易分辨,juice值问题GPT 5系列模型也可以正常回答,笔者认为测得不完全准,因此笔者更推荐问日本首相问题。在使用GPT 6 Astra和GPT 6.1 Sol的过程中,据笔者观察,降智后的模型并...