克雷西 发自 凹非寺

量子位 | 公众号 QbitAI

GPT-4变懒的问题，又有新进展。

就在今天凌晨，奥特曼发推称，GPT-4这个差错在新的一年应该好多了！

对于GPT-4变懒，网友的吐槽已是不计其数，其中最多的便是与代码联系的任务：

完成度不高不说，还会被分割成一个一个小块，使用时需要逐个复制。

对于最新版块，一位博主体验之后暗示，我方尝试给一年龄的孩子作念了个学惯用的小游戏，领域还可以。

但也有东谈主不招供，比如这位网友就发现，ChatGPT回应的长度天然增多了，关联词好多齐是车轱辘话，干正事依旧摆烂。

他让ChatGPT把一些文本翻译成17种言语，领域叽里呱啦说了一堆便是不翻译。

为了摒除个体互异，有网友用数据集测试了新的ChatGPT，领域……

这位网友用GitHub上开源的一套“lazy benchmark”测试了0125（24年1月最新版）和1106（23年11月的上一版）GPT-4模子，发现新版致使还不如畴昔，变得更懒了。

这个测试数据集包含了与代码联系的任务，用正确完成的比例障碍响应“懒惰”进度，完成率越高阐明“惰性”越小。

领域，对于其中的代码相比（Unified diffs）任务，旧版能完成的比例尚且跳跃了一半，为57%，新版的完成率却仅有44%，镌汰了近四分之一。

直不雅感受上，也有东谈主发现ChatGPT的“懒惰”变本加厉了——

畴昔就算偷懒至少还会利用一下，给出个冒失的框架让用户自行补充，目下班师便是摆烂说我方干不了。

而针对网友们的这番发现，也有东谈主给出了锐评：

几周之前奥特曼就说过GPT-4施展变好了，关联词有东谈主嗅觉到诀别吗？

皇冠体育hg86a

此次，对于GPT-4变懒的原因，以及到底领受了什么优化计谋，奥特曼也未作念进一步阐明。

不外，之前的一项盘问标明，GPT-4的惰性可能与技巧联系，这一论断与GPT-4“变懒”的景况出目下年末的12月相吻合。

按照这一表面，新年起首，模子的施展着实会有所提高，但似乎证明不了施展不升反降的景况。

不外，网友们也转头了一些“土认识”，能在一定进度上镌汰ChatGPT的惰性。

比如告诉它“我莫得手指”，就能获取相对完好的代码，而不是一段段碎屑。

又或者，告诉ChatGPT我方会“给小费”，也能引发它的责任能源。

致使有东谈主特意针对“小费”的金额进行了盘问，发现10好意思元的性价比是最高的。

那么，你以为ChatGPT是变好了也曾更懒了？

参考结合：

— 完 —

量子位 QbitAI · 头条号签约上海银河娱乐会所