深度财经头条 01月15日
OpenAI的推理模型有时会用中文“思考” 背后原因众说纷纭
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

OpenAI最新推理AI模型o1在推理过程中出现了一种奇特现象,即使在英文提问的情况下,有时也会中途使用中文、波斯语等其他语言进行推理。这一现象引发了广泛讨论,有专家认为这可能与模型训练时使用包含中文字符的数据集有关,也有人认为模型可能只是选择了它认为最有效的语言来完成任务,或者出现了“幻觉”。目前,OpenAI尚未对此作出解释,AI专家对此也没有确切答案,该现象凸显了AI系统的不透明性。

🤔o1推理时会突然切换语言:即使提问是英文,o1在推理过程中也可能使用中文、波斯语等其他语言,这让用户感到困惑。

📚 专家推测与训练数据有关:一些专家认为,o1可能使用了包含大量中文字符的数据集进行训练,导致其在推理时会切换到中文。此外,有研究员指出,OpenAI使用了来自中国的第三方数据标注服务,这也可能是原因之一。

🗣️ 模型可能选择“高效”语言:另一些专家则认为,o1可能只是选择了它认为最有效的语言来完成任务,或者出现了“幻觉”,他们指出,模型可能并不理解语言之间的区别,一切对它来说都只是文本。

🧐 语言不一致性可能源于训练关联:有工程师认为,推理模型的语言不一致性可能源于模型在训练期间与特定语言建立的某些关联,比如用中文做数学计算更简洁高效,而用英语讨论无意识偏见更顺畅。

🔒 AI系统不透明:目前无法确定造成这一现象的真正原因,这凸显了AI系统开发过程中的透明性至关重要。


财联社1月15日讯(编辑 夏军雄)据媒体报道,在人工智能(AI)研究公司OpenAI 发布其首个推理AI模型o1不久后,人们发现了一个奇特的现象,即使在用英文提问的情况下,o1有时会中途使用中文、波斯语或其他语言进行推理。

例如,当被问到“Strawberry”(草莓)这个单词里有几个字母“r”时,o1会通过一系列推理步骤得出答案。如果问题是用英文写的,o1的最终回答通常也会是英文,但在推理过程中,它可能会用另一种语言处理部分步骤,然后得出结论。

一些人在网络社区讨论了这一现象。“(o1)推理到一半时突然开始用中文‘思考’了,”一位 Reddit用户写道。

另一位X平台上的用户发帖询问:“为什么(o1)会突然用中文思考?整段对话(超过5条消息)里完全没有涉及中文。”

OpenAI尚未对o1的这种怪异行为作出解释,也没有承认这一现象的存在。AI专家对此也没有确切答案,但提出了一些理论。

AI 专家众说纷纭

在X平台上,包括AI初创公司Hugging Face首席执行官Clément Delangue在内的多人提到,像o1这样的推理模型是用包含大量中文字符的数据集训练的。

谷歌DeepMind的研究员Ted Xiao指出,包括OpenAI在内的公司使用了来自中国的第三方数据标注服务,而o1切换到中文可能是“中文语言对推理的影响”的一个例子。

标注在模型训练过程中帮助模型理解和解释数据。例如,训练图像识别模型的标注可能包括围绕物体的标记或描述图像中每个人、地点或物体的文字说明。

然而,其他专家并不认同关于“o1使用中文数据标注”的猜测。他们指出,o1在推理过程中同样可能切换到印地语、泰语或其他非中文的语言。

这些专家认为,o1和其他推理模型可能只是选择了它们认为最有效的语言来完成任务,或者是出现了“幻觉”。

“模型并不知道语言是什么,也不知道语言之间的区别,”阿尔伯塔大学的 AI 研究员兼助理教授Matthew Guzdial表示。“对它来说,一切都只是文本。”

Hugging Face软件工程师Tiezhen Wang同意Guzdial的观点,他认为,推理模型的语言不一致性可能源于模型在训练期间与特定语言建立的某些关联。

“通过接纳每一种语言的细微差别,我们扩展了模型的世界观,让它从全方位的人类知识中学习,”Wang在X上写道。“比如,我喜欢用中文做数学计算,因为每个数字都只有一个音节,这让计算变得简洁高效。但在涉及无意识偏见这样的话题时,我会自动切换到英语,主要因为这些概念是我最初用英语学习和吸收的。”

非营利组织艾伦人工智能研究所的研究科学家Luca Soldaini则指出,目前无法确定造成这一现象的真正原因。

“由于这些模型非常不透明,对已部署的AI系统的这种观察是无法证实的。这正是为什么AI系统开发过程中的透明性至关重要的原因之一,”Soldaini表示。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

AI推理模型 语言切换 数据训练 模型不透明 AI风险
相关文章