返回 AI 资讯
社区讨论LinuxDo 最新

【干货】GPT6降智现象和行为分析

背景: 最近在开发软件时被GPT降智搞得有亿点崩溃,不管是GPT 6 Astra还是GPT 6.1 Sol,几乎所有的中转站全都在降智,而且几乎是没有规律的降智,但我也因此获得了一些经验用于分辨GPT是否降智以及如何尽可能规避降智,故作此文对GPT的降智现象和行为进行分析。 模型降智现象和分辨方法: 现象: 据笔者所观察,模型的降智表现主要为1.未完成任务就结束,写的代码一大堆问题2.工具调用经常出现错误3.会出现一些莫名其妙的工具调用信息(后文会提到) 分辨方法: 目前流行的分辨方法主要为画鹦鹉、问juice值…

内容摘要

作者:#wujunyyds 板块:#搞七捻三 背景: 最近在开发软件时被GPT降智搞得有亿点崩溃,不管是GPT 6 Astra还是GPT 6.1 Sol,几乎所有的中转站全都在降智,而且几乎是没有规律的降智,但我也因此获得了一些经验用于分辨GPT是否降智以及如何尽可能规避降智,故作此文对GPT的降智现象和行为进行分析。 模型降智现象和分辨方法: 现象: 据笔者所观察,模型的降智表现主要为1.未完成任务就结束,写的代码一大堆问题2.工具调用经常出现错误3.会出现一些莫名其妙的工具调用信息(后文会提到) 分辨方法: 目前流行的分辨方法主要为画鹦鹉、问juice值、问日本首相问题等。三种方法理论上都可行,但由于画鹦鹉需要较长时间且新手小白不容易分辨,juice值问题GPT 5系列模型也可以正常回答,笔者认为测得不完全准,因此笔者更推荐问日本首相问题。在使用GPT 6 Astra和GPT 6.1 Sol的过程中,据笔者观察,降智后的模型并不是唯一的,问日本首相问题可能会得到以下三种答案。 1.回答高市早苗: 这个版本笔者认为是没有降智的正常版本。实际测试下来,智商比较正常,符合GPT 6系列的能力 2.回答石破茂: 这个版本毫无疑问是降智版本,而且这个版本还可能会出现一种情况,就是在聊天中莫名其妙出现”已向父代理发送消息“但是在整个聊天当中,根本就没有开启任何的子代理。并且这个版本存在所有上文提到的降智模型会表现出来的现象。笔者在使用GPT 6 Astra出现降智的情况下,大多数都是路由到这个模型,而不是第三种“岸田文雄” 3.回答岸田文雄: 这个版本也是降智版本,笔者在使用GPT 6.1 Sol的时候比较多数情况都是路由到以下模型,笔者认为这个版本它降智比较隐蔽,看上去都挺正常的,直到你最终检验成果的时候,才发现他啥也没干,随便改一点代码就交付了,并且这个版本不遵守指令,可能直接无视你直接网络搜索获取最新信息并且比较抗拒回答日本首相这一问题,其他版本都不会有这种情况,你必须要让他用记忆告诉你才行,如下图所示 日常使用建议: 以下建议主要是针对使用中转站的用户,并不一定适合使用官方账号直

资讯来源

LinuxDo

原文链接

打开原文