真相 | Facebook AI系统并未“失控”,研究员已修正bug

简介:

雷锋网AI科技评论按:英国《太阳报》8月1日报道了一则”机器人正在接手人类主动权吗?”的新闻。文中讲到 Facebook最近关停了一项人工智能实验,因为两个机器人开始用自己的语言交流,人类并不知道它们在讲什么。

随后,Facebook关闭“失控”AI系统,机器人发展出人类无法理解的语言等类似这样的标题占据国内各大科技媒体头条。然而AI科技评论并没有跟风,为了弄清事情的来龙去脉,给公众一个客观真实的报道,我们了解到:

  • Facebook并没有关闭这个AI实验项目,只是做了修正,修正也不是因为“失控”,是因为没有意义。

  • Facebook的AI是否创造了语言,要看如何定义「语言」。比如说,Python、JavaScript这类计算机语言并非真正的语言,但也会称之为「语言」。

为什么Facebook AI突然会火?

其实这个AI 实验项目在半个月之前都已经有媒体报道过,最近又被媒体提出来,很可能要追溯到前几天Facebook创始人马克·扎克伯格与特斯拉CEO 埃隆·马斯克在twitter 上的那场隔空论战。

马斯克认为,人工智能将威胁人类或引发恐慌,呼吁政府尽快考虑针对这一技术的相关立法与管控;而扎克伯格则认为,人工智能将会让人类的生活变得更安全和美好,那些“反对(人工智能)并鼓吹(因人工智能而引发)世界末日论”的人“非常不负责任”。马斯克随后在推特回复网友转发时说:“我和小扎讨论过这个,他对人工智能认识有限。”

他们两位业界巨头持截然相反的观点,很快便引发科技界争论,甚至学术界的专家也出来战队。这样的大新闻,媒体自然不会放过,Facebook AI项目也是趁上次的争论余热未消,引起了大家注意。

扎克伯格究竟有没有自己打脸?

雷锋网编辑告诉大家:并没有。

实际情况是这样的,Facebook人工智能研究院(FAIR)想要训练一个聊天机器人,让它学会和人谈判,于是他们人工智能系统开发了神经网络结构,这个结构叫做“生成式对抗网络”(Generative Adversarial Networks,简称GAN)。研究人员希望机器人可以带着“目的”和人类对话。而这个目的也很简单:一共有两本书,一顶帽子和三个篮球,三样东西分别设定了不同的权重,就是想让机器人拥有“意识”,明白它到底对这些东西有多想要,然后去和人谈判。

真相 | Facebook AI系统并未“失控”,研究员已修正bug

研究过程中,研究员突发奇想,想看看让两个机器人聊天,他们会聊什么,于是,就出现了网路上传播甚广的“机器人暗语”。

真相 | Facebook AI系统并未“失控”,研究员已修正bug

之所以会出现这段看似是英语,却用英语语法解释不通的对话,最后究其原因才发现,研究员在为系统设置激励条件时, 虽然告诉了它们“请用英文”,但忘了告诉它们“请用英文语法”。 换句话说,如果系统中编写针对英语语法的奖励机制,系统就会偏向于更符合英语语法的语言,也就不会出现现在这种情况。

说到底,这最多只能算是一个技术错误。Facebook并没有“关掉”这个系统,而是重新设定了正确的激励,修正了机器人的行为,修正的原因也不是因为害怕系统失控,而是因为这样的对话毫无意义,偏离了研究的最初目的。

雷锋网(公众号:雷锋网)AI科技评论

本文作者:杨文

本文转自雷锋网禁止二次转载,原文链接

相关文章
|
3月前
|
人工智能 监控 安全
提效40%?揭秘AI驱动的支付方式“一键接入”系统
本项目构建AI驱动的研发提效系统,通过Qwen Coder与MCP工具链协同,实现跨境支付渠道接入的自动化闭环。采用多智能体协作模式,结合结构化Prompt、任务拆解、流程管控与安全约束,显著提升研发效率与交付质量,探索大模型在复杂业务场景下的高采纳率编码实践。
492 26
提效40%?揭秘AI驱动的支付方式“一键接入”系统
|
3月前
|
人工智能 自然语言处理 前端开发
最佳实践2:用通义灵码以自然语言交互实现 AI 高考志愿填报系统
本项目旨在通过自然语言交互,结合通义千问AI模型,构建一个智能高考志愿填报系统。利用Vue3与Python,实现信息采集、AI推荐、专业详情展示及数据存储功能,支持响应式设计与Supabase数据库集成,助力考生精准择校选专业。(239字)
366 12
|
3月前
|
存储 人工智能 搜索推荐
LangGraph 记忆系统实战:反馈循环 + 动态 Prompt 让 AI 持续学习
本文介绍基于LangGraph构建的双层记忆系统,通过短期与长期记忆协同,实现AI代理的持续学习。短期记忆管理会话内上下文,长期记忆跨会话存储用户偏好与决策,结合人机协作反馈循环,动态更新提示词,使代理具备个性化响应与行为进化能力。
587 10
LangGraph 记忆系统实战:反馈循环 + 动态 Prompt 让 AI 持续学习
|
3月前
|
机器学习/深度学习 人工智能 JSON
PHP从0到1实现 AI 智能体系统并且训练知识库资料
本文详解如何用PHP从0到1构建AI智能体,涵盖提示词设计、记忆管理、知识库集成与反馈优化四大核心训练维度,结合实战案例与系统架构,助你打造懂业务、会进化的专属AI助手。
324 6
|
3月前
|
人工智能 JSON 安全
Claude Code插件系统:重塑AI辅助编程的工作流
Anthropic为Claude Code推出插件系统与市场,支持斜杠命令、子代理、MCP服务器等功能模块,实现工作流自动化与团队协作标准化。开发者可封装常用工具或知识为插件,一键共享复用,构建个性化AI编程环境,推动AI助手从工具迈向生态化平台。
565 1
|
3月前
|
机器学习/深度学习 人工智能 自然语言处理
拔俗当AI成为你的“心灵哨兵”:多模态心理风险预警系统如何工作?
AI多模态心理预警系统通过融合表情、语调、文字、绘画等多维度数据,结合深度学习与多模态分析,实时评估心理状态。它像“心灵哨兵”,7×24小时动态监测情绪变化,发现抑郁、焦虑等风险及时预警,兼顾隐私保护,助力早期干预,用科技守护心理健康。(238字)
|
3月前
|
存储 人工智能 自然语言处理
拔俗AI产投公司档案管理系统:让数据资产 “活” 起来的智能助手
AI产投档案管理系统通过NLP、知识图谱与加密技术,实现档案智能分类、秒级检索与数据关联分析,破解传统人工管理效率低、数据孤岛难题,助力投资决策提效与数据资产化,推动AI产投数字化转型。
|
3月前
|
人工智能 算法 数据安全/隐私保护
拔俗AI多模态心理风险预警系统:用科技守护心理健康的第一道防线
AI多模态心理风险预警系统通过语音、文本、表情与行为数据,智能识别抑郁、焦虑等心理风险,实现早期干预。融合多源信息,提升准确率,广泛应用于校园、企业,助力心理健康服务从“被动响应”转向“主动预防”,为心灵筑起智能防线。(238字)
|
3月前
|
人工智能 搜索推荐 Cloud Native
拔俗AI助教系统:教师的"超级教学秘书",让每堂课都精准高效
备课到深夜、批改作业如山?阿里云原生AI助教系统,化身“超级教学秘书”,智能备课、实时学情分析、自动批改、精准辅导,为教师减负增效。让课堂从经验驱动转向数据驱动,每位学生都被看见,教育更有温度。
|
3月前
|
机器学习/深度学习 人工智能 监控
拔俗AI智能营运分析助手软件系统:企业决策的"数据军师",让经营从"拍脑袋"变"精准导航"
AI智能营运分析助手打破数据孤岛,实时整合ERP、CRM等系统数据,自动生成报表、智能预警与可视化决策建议,助力企业从“经验驱动”迈向“数据驱动”,提升决策效率,降低运营成本,精准把握市场先机。(238字)