跳到正文
IFAI

大模型

OpenAI 推出 ChatGPT:基于 GPT-3.5,能承认错误并拒绝不当请求

首次发布 传播指数 52

OpenAI 推出全新对话 AI 系统 ChatGPT。该系统基于 GPT-3.5 家族开发,结合监督学习与强化学习微调,不仅能回答日常问题,还能承认自身错误并拒绝不合适的要求。官方目前开放试用,正通过收集公众反馈来持续改进模型。

OpenAI 推出 ChatGPT:基于 GPT-3.5,能承认错误并拒绝不当请求
图:jinlow.medium.com

以往跟聊天机器人打交道,往往聊不了几句就让人抓狂——对方要么像个死板的客服复读预设话术,要么一本正经地胡说八道,而且绝不认错。

OpenAI 想要打破这种僵局。他们推出了一款名为 ChatGPT 的全新 AI 对话系统,目前已经面向公众开放测试。官方的目的很明确:让大家进来随便聊,依靠真实用户的反馈来帮模型查漏补缺。

会承认错误,也懂拒绝不当要求

ChatGPT 的底座是 OpenAI 的 GPT-3.5 家族大语言模型。但光有庞大的模型还不够,要想让它像个正常人一样聊天,关键在于后期的调优。

开发团队结合了监督学习与强化学习微调技术。监督学习让模型学习人类示范的优质对话,强化学习则进一步引导它判断什么样的回复更符合人类的预期。

经过这套组合拳训练后,ChatGPT 展现出了几个让人眼前一亮的能力。它不仅能流畅回答各种日常问题,更关键的是学会了「认错」——当发现自己的回复有问题时,它会主动承认;面对不合理或不恰当的请求时,它也能直接拒绝,而不是盲目顺从。

这种近乎真人的交互方式迅速引发了轰动。在技术类内容向来不容易出圈的 Medium 平台上,ChatGPT 甚至罕见地冲上了热门搜索榜单。有开发者在梳理技术脉络时提到,从 Google 在 2018 年 10 月发布 BERT、开启双向编码与掩码语言模型预测时代算起,语言模型的演进一直在加速,而 ChatGPT 则把焦点从单纯的语言理解拉到了真正的交互对话上。

为什么重要

我们认为,ChatGPT 这次最聪明的地方,在于它没有单纯炫耀模型的参数规模,而是把功夫下在了「人情世故」与安全边界上。让 AI 学会拒绝不当要求、承认自己的盲区,比单纯答对一道题要难得多,这也是对话系统走向实用化的必经之路。

对普通用户和开发者来说,这意味着与 AI 交互的门槛被彻底打平了。你不需要学习复杂的指令语法,只要用平时的说话习惯向它提问,就能得到极具参考价值的回复,无论是日常答疑还是辅助写作都值得立刻尝试。

但这里的隐患也显而易见。OpenAI 之所以急切地需要公众反馈,说明模型内部依然存在幻觉和逻辑漏洞,它给出的答案往往听起来极有说服力,却未必百分之百准确。使用者现在必须保持警惕,不能完全把关键事实的核验交给它。

对整个行业而言,ChatGPT 把对话 AI 的竞争拉入了一个新维度。同行们很快会发现,单纯堆算力训练底座已经不够用了,如何通过强化学习对齐人类偏好、建立安全与反馈闭环,正在成为新的护城河。

来源 (2)

  1. [1]
    jinlow.medium.com(在新标签页打开)原文jinlow.medium.com
  2. [2]

每日 AI 内容精选