OpenAI上周承认,GPT4.0变懒惰了,但也承诺将解决此事。
OpenAI说听到使用者对GPT4变懒惰的反馈意见了,该公司解释原因在于他们从11月11日就未再更新模型,这「当然不是故意的」。GPT模型可能因此变得不可预测,OpenAI也正在著手修复问题。
使用者抱怨GPT 4「变懒惰」是指,这模型在11月底前后开始不再确实执行用户的指令。例如《Digitaltrend》报导,一名ChatGPT Plus用户指出ChatGPT说档案太长无法转档,撰写表格只填了3栏、拒绝读取连结、也无法读取Python档,或是叫它使用程式码解释器,它却用了图片生成模型。另一名用户叫ChatGPT列出特定二个时间点之间的日期,它却要求提供更多资讯,例如这个期间有几个礼拜。
OpenAI说明,模型未更新让GPT模型行为出现细微的变化,但只有很少部份提示效果变差,因此使用者和公司员工要好一段时间才会发现并解决问题。
OpenAI并指出,在发布新模型前,他们会做彻底的离线评估和线上A/B测试,而在所有测试后,会根据数据判定新模型对真实使用者而言是否优于前一代,同时OpenAI也鼓励使用者持续给予回馈意见。
不过ChatGPT某些行为似乎是刻意设定的。例如上周有用户发现,当用户要求「永远」重复某个字词(例如computer)时,ChatGPT拒绝执行无限重复某个字。ChatGPT给的理由是技术限制、没有意义,以及对使用者体验没有帮助。
至于GPT4的更新工作何以中断,OpenAI并未说明,不过可能与11月的人事动荡有关。OpenAI举行首次开发者大会宣布GPT 4.0及多项更新后,旋即发生CEO Sam Altman一度遭董事会开除,后者还接连任命2任CEO,Altman及总裁Greg Brockman还曾短暂加入微软。
虽然5天后Altman重回原职,但组织一阵混乱,又碰上时值欧美市场的年底假期,OpenAI的日常事务已遭到耽搁。除了GPT 4.0的更新外,原预定12月初上线供开发人员分享客制化模型的GPT Store,因为某事让他们忙得不可开交,将延迟到2024年初才会开张。