OpenAI重写模型规范:五条价值观里排第一的是“忠于人类意图”

AI资讯27分钟前发布 Cezary
2.4K 0

你让AI“把这段删短一点”,它是该机械地砍掉一半字数,还是该猜你想保留哪几句?

OpenAI周四更新的《模型规范》(Model Spec),就是在回答这类问题。这份文件是公开的,用来说明OpenAI希望自家模型在各种情况下怎么表现。这一版做了一次重构,整套规范围绕五项核心价值观重新组织:

忠于人类意图、最大限度减少伤害、诚实与透明、尊重人类自主权、关怀。

排在第一的”忠于人类意图”被定义为整个框架的基础。按OpenAI的说法,模型要理解用户、开发者和OpenAI三方的意图与价值取向,而不是简单地按字面执行指令。

这句话分量不轻。

按字面执行,出了错可以说”你就是这么说的”;理解意图,就意味着模型要替你做判断,判断错了责任在它。等智能体开始替人订票、改代码、发邮件,这个分歧会被无限放大。一个只会照字面办事的代理很危险,一个太会”揣摩上意”的代理同样危险。

另外三方并列也耐人寻味:用户、开发者、OpenAI。当三者的意图冲突时谁优先,这份规范的细则会比这五个词重要得多。

其余几条相对好理解。减少伤害是老话题;诚实与透明这次强调的是对”自己知道什么、不知道什么”保持透明,也就是少一点一本正经地胡说;尊重自主权讲的是帮用户做他自己的决定、追求他自己的目标,而不是替他拿主意。

“关怀”被单独列为一条,倒是第一次这么明确。它和尊重自主权之间有张力:关心一个人,难免想劝他;尊重一个人,就得允许他不听劝。

规范写得再好,最终要看ChatGPT在具体对话里怎么拿捏。

© 版权声明

相关文章

OpenAI重写模型规范:五条价值观里排第一的是“忠于人类意图” 暂无评论

none
暂无评论...