真相 | Facebook AI系统并未“失控”,研究员已修正bug

简介:

雷锋网AI科技评论按:英国《太阳报》8月1日报道了一则”机器人正在接手人类主动权吗?”的新闻。文中讲到 Facebook最近关停了一项人工智能实验,因为两个机器人开始用自己的语言交流,人类并不知道它们在讲什么。

随后,Facebook关闭“失控”AI系统,机器人发展出人类无法理解的语言等类似这样的标题占据国内各大科技媒体头条。然而AI科技评论并没有跟风,为了弄清事情的来龙去脉,给公众一个客观真实的报道,我们了解到:

  • Facebook并没有关闭这个AI实验项目,只是做了修正,修正也不是因为“失控”,是因为没有意义。

  • Facebook的AI是否创造了语言,要看如何定义「语言」。比如说,Python、JavaScript这类计算机语言并非真正的语言,但也会称之为「语言」。

为什么Facebook AI突然会火?

其实这个AI 实验项目在半个月之前都已经有媒体报道过,最近又被媒体提出来,很可能要追溯到前几天Facebook创始人马克·扎克伯格与特斯拉CEO 埃隆·马斯克在twitter 上的那场隔空论战。

马斯克认为,人工智能将威胁人类或引发恐慌,呼吁政府尽快考虑针对这一技术的相关立法与管控;而扎克伯格则认为,人工智能将会让人类的生活变得更安全和美好,那些“反对(人工智能)并鼓吹(因人工智能而引发)世界末日论”的人“非常不负责任”。马斯克随后在推特回复网友转发时说:“我和小扎讨论过这个,他对人工智能认识有限。”

他们两位业界巨头持截然相反的观点,很快便引发科技界争论,甚至学术界的专家也出来战队。这样的大新闻,媒体自然不会放过,Facebook AI项目也是趁上次的争论余热未消,引起了大家注意。

扎克伯格究竟有没有自己打脸?

雷锋网编辑告诉大家:并没有。

实际情况是这样的,Facebook人工智能研究院(FAIR)想要训练一个聊天机器人,让它学会和人谈判,于是他们人工智能系统开发了神经网络结构,这个结构叫做“生成式对抗网络”(Generative Adversarial Networks,简称GAN)。研究人员希望机器人可以带着“目的”和人类对话。而这个目的也很简单:一共有两本书,一顶帽子和三个篮球,三样东西分别设定了不同的权重,就是想让机器人拥有“意识”,明白它到底对这些东西有多想要,然后去和人谈判。

真相 | Facebook AI系统并未“失控”,研究员已修正bug

研究过程中,研究员突发奇想,想看看让两个机器人聊天,他们会聊什么,于是,就出现了网路上传播甚广的“机器人暗语”。

真相 | Facebook AI系统并未“失控”,研究员已修正bug

之所以会出现这段看似是英语,却用英语语法解释不通的对话,最后究其原因才发现,研究员在为系统设置激励条件时, 虽然告诉了它们“请用英文”,但忘了告诉它们“请用英文语法”。 换句话说,如果系统中编写针对英语语法的奖励机制,系统就会偏向于更符合英语语法的语言,也就不会出现现在这种情况。

说到底,这最多只能算是一个技术错误。Facebook并没有“关掉”这个系统,而是重新设定了正确的激励,修正了机器人的行为,修正的原因也不是因为害怕系统失控,而是因为这样的对话毫无意义,偏离了研究的最初目的。

雷锋网(公众号:雷锋网)AI科技评论

本文作者:杨文

本文转自雷锋网禁止二次转载,原文链接

相关文章
|
11天前
|
机器学习/深度学习 数据采集 人工智能
AI赋能教育:深度学习在个性化学习系统中的应用
【10月更文挑战第26天】随着人工智能的发展,深度学习技术正逐步应用于教育领域,特别是个性化学习系统中。通过分析学生的学习数据,深度学习模型能够精准预测学生的学习表现,并为其推荐合适的学习资源和规划学习路径,从而提供更加高效、有趣和个性化的学习体验。
61 9
|
24天前
|
数据采集 机器学习/深度学习 人工智能
揭秘AI大模型的‘梦幻迷雾’:一场关于真实与虚假的智力较量,你能否穿透幻觉迷雾,窥见真相之光?
【10月更文挑战第13天】本文深入探讨了大模型幻觉的底层逻辑,分析了其产生的原因、表现形式及解决方案。从数据质量、模型复杂度、解码策略等方面解析幻觉成因,提出了提高数据质量、引入正则化技术、增强上下文理解等对策,旨在减少大模型生成不准确或虚假信息的风险。
48 1
|
1月前
|
机器学习/深度学习 数据采集 人工智能
未来的守护神:AI驱动的网络安全之盾,如何用智慧的光芒驱散网络黑暗势力?揭秘高科技防御系统背后的惊天秘密!
【10月更文挑战第3天】随着网络技术的发展,网络安全问题日益严峻,传统防御手段已显不足。本文探讨了构建AI驱动的自适应网络安全防御系统的必要性及其关键环节:数据采集、行为分析、威胁识别、响应决策和执行。通过Python库(如scapy、scikit-learn和TensorFlow)的应用实例,展示了如何利用AI技术提升网络安全防护水平。这种系统能够实时监控、智能分析并自动化响应,显著提高防护效率与准确性,为数字世界提供更强大的安全保障。
57 2
|
22天前
|
人工智能 自然语言处理 机器人
对话阿里云 CIO 蒋林泉:AI 时代,企业如何做好智能化系统建设?
10 月 18 日, InfoQ《C 位面对面》栏目邀请到阿里云 CIO 及 aliyun.com 负责人蒋林泉(花名:雁杨),就 AI 时代企业 CIO 的角色转变、企业智能化转型路径、AI 落地实践与人才培养等主题展开了讨论。
706 64
对话阿里云 CIO 蒋林泉:AI 时代,企业如何做好智能化系统建设?
|
20天前
|
存储 人工智能 自然语言处理
高级 RAG 技术:提升生成式 AI 系统输出质量与性能鲁棒性【预检索、检索、检索后、生成优化等】
高级 RAG 技术:提升生成式 AI 系统输出质量与性能鲁棒性【预检索、检索、检索后、生成优化等】
高级 RAG 技术:提升生成式 AI 系统输出质量与性能鲁棒性【预检索、检索、检索后、生成优化等】
|
10天前
|
机器学习/深度学习 人工智能 搜索推荐
AI在医疗领域的革命:智能诊断系统的未来
在科技日新月异的今天,人工智能(AI)技术正逐渐渗透到我们生活的每一个角落,其中医疗领域尤为显著。本文将探讨AI在医疗诊断中的应用及其带来的变革,重点介绍智能诊断系统的发展现状与未来趋势。通过深入浅出的方式,我们将揭示AI如何改变传统医疗模式,提高诊断效率和准确性,最终造福广大患者。
|
15天前
|
人工智能 API 决策智能
swarm Agent框架入门指南:构建与编排多智能体系统的利器 | AI应用开发
Swarm是OpenAI在2024年10月12日宣布开源的一个实验性质的多智能体编排框架。其核心目标是让智能体之间的协调和执行变得更轻量级、更容易控制和测试。Swarm框架的主要特性包括轻量化、易于使用和高度可定制性,非常适合处理大量独立的功能和指令。【10月更文挑战第15天】
114 6
|
8天前
|
人工智能 自然语言处理 安全
AI技术在智能客服系统中的应用与挑战
【10月更文挑战第28天】本文将深入探讨人工智能(AI)技术在智能客服系统中的应用及其面临的挑战。我们将通过实例分析,了解AI如何改善客户服务体验,提高效率和降低成本。同时,我们也将关注AI在实际应用中可能遇到的问题,如语义理解、情感识别和数据安全等,并提出相应的解决方案。
|
1月前
|
人工智能 安全 自动驾驶
【通义】AI视界|英特尔和AMD“史无前例”首次合作,组建X86生态系统咨询小组
本文概览了近期科技领域的五大热点新闻,包括联想与Meta合作推出个人AI智能体“AI Now”,英特尔和AMD首次合作组建X86生态系统咨询小组,特斯拉计划大规模生产自动驾驶出租车,前Palantir首席信息安全官加盟OpenAI,以及Meta因涉嫌损害青少年心理健康面临美国多州诉讼。更多资讯,请访问通义平台。
|
1月前
|
数据采集 人工智能 测试技术
还在死磕AI咒语?北大-百川搞了个自动提示工程系统PAS
【10月更文挑战第4天】北京大学和百川智能研究人员开发了一种名为PAS的即插即用自动提示工程(APE)系统,利用高质量数据集训练的大型语言模型(LLMs),在基准测试中取得了显著成果,平均提升了6.09个百分点。PAS仅需9000个数据点即可实现顶尖性能,并能自主生成提示增强数据,提高了灵活性和效率。尽管存在训练数据质量和提示多样性等方面的潜在局限性,PAS仍为解决提示工程挑战提供了有前景的方法,有望提升LLM的可用性和有效性。论文详见:https://arxiv.org/abs/2407.06027。
41 3
下一篇
无影云桌面