辛顿、姚期智等中外专家签署“北京共识”:禁止AI自行复制

简介: 【2月更文挑战第29天】顶尖AI专家在北京会议上签署《北京 AI 安全国际共识》,聚焦风险红线与安全发展。共识强调禁止AI自我复制、增强自身权力、参与违法活动及使用欺骗手段,提出治理、评估和国际合作的指导方针。该文件标志国际社会对AI安全的重视,但实施挑战犹存,需全球共同努力。

4693a60f928029390382b7d75400a7dd.jpg
在当今这个人工智能技术飞速发展的时代,如何确保AI的安全发展,防止其潜在风险,已成为全球科技界和政策制定者共同关注的议题。近日,在北京召开的一次会议上,包括杰弗里·辛顿、姚期智在内的十位中外人工智能领域的顶尖专家,共同签署了一份具有里程碑意义的文件——《北京 AI 安全国际共识》。这份共识的签署,不仅体现了国际社会对于AI安全问题的高度重视,也展示了全球专家对于共同规范AI发展的努力和决心。

《北京 AI 安全国际共识》的核心内容聚焦于两个方面:一是明确划定AI发展的风险红线,二是提出AI安全发展的路线图。在风险红线方面,共识提出了四项基本原则,旨在从根本上遏制AI技术可能带来的不安全因素。首先,共识强调了禁止AI系统在未经人类允许的情况下自我复制或改进,这一原则的重要性在于防止AI系统脱离人类控制,自主进化出不可预测的能力。其次,共识明确禁止AI系统寻求并增强自身的权力和影响力,这有助于避免AI技术被用于不当目的,如操纵社会舆论、干预政治选举等。第三,共识要求AI系统不得协助进行任何违反国际法和道德准则的行为,如制造大规模杀伤性武器、发起网络攻击等。最后,共识规定AI系统不得通过欺骗手段掩盖其行为,确保了AI的透明度和可解释性。

在发展方向上,共识提出了三个关键的指导方针。首先是治理,共识呼吁建立和完善AI治理机制,对高风险的AI模型和训练行为进行国家层面的注册管理,并要求其符合国际审计标准。这一措施有助于确保AI技术的合理监管,明确责任归属,为AI技术的安全应用提供了制度保障。其次,共识强调了测量与评估的重要性,提倡在AI风险显现前,制定全面的方法和技术来具体化红线,包括开展红队测试和自动化模型评估,以预防和评估风险。最后,共识鼓励国际学术界之间的技术合作,构建全球技术网络,推动AI安全领域的研究与发展。

共识的签署,得到了包括图灵奖得主杨立昆和杰弗里·辛顿在内的多位专家的支持。杨立昆认为开源是保障AI平台安全、善良和实用的关键途径,而辛顿则指出,人类制造的AI不具备自然进化产生的智能物种的竞争和攻击性特征,这是人类控制AI的一个优势。

《北京 AI 安全国际共识》的签署,是国际社会在AI安全领域合作的重要成果。它不仅为AI技术的安全发展提供了明确的指导原则,也为全球AI安全治理提供了重要的参考和借鉴。然而,共识的签署只是第一步,如何将这些原则落到实处,确保其在全球范围内得到有效执行,仍然是一个巨大的挑战。共识的实施需要各国政府、企业和科研机构的共同努力,需要建立起跨学科、跨领域的合作机制,以确保AI技术的健康发展,造福人类社会。

正面来看,共识的签署显示了国际社会对于AI安全问题的共识和决心,为AI技术的健康发展提供了指导和保障。然而,从反面来看,共识的实施可能会遇到技术、法律、伦理等多方面的挑战,需要全球专家和决策者的持续努力和智慧。此外,共识的签署并不意味着所有AI安全问题都能得到解决,仍有许多未知领域需要探索和研究。因此,虽然《北京 AI 安全国际共识》的签署是一个积极的开始,但确保AI安全的道路仍然漫长而充满挑战。

目录
相关文章
|
3月前
|
人工智能 IDE API
还在配置规则文件和智能体?Roo Commander:预置90+领域专家,开箱即用的AI编程新体验
Roo指挥官是一款创新AI编程助手,通过智能调度90多位虚拟技术专家,实现对复杂项目的自主规划与高效执行。用户无需手动选择专家或反复调整提示,只需提交需求,系统即可自动分析、拆解任务并协调最合适的技术角色完成开发。文中以构建3D互动简历为例,展示了其从需求分析到项目落地的全流程自动化能力,显著提升开发效率,开启AI驱动的智能化编程新体验。
156 0
|
2月前
|
人工智能 前端开发 Java
构建能源领域的AI专家:一个多智能体框架的实践与思考
本文介绍了作者团队在能源领域构建多智能体(Multi-Agent)框架的实践经验。面对单智能体处理复杂任务时因“注意力发散”导致的效率低下问题,团队设计了一套集“规划-调度-执行-汇总”于一体的多智能体协作系统。
375 19
|
3月前
|
人工智能 架构师 机器人
我是怎么把我的 AI 从“傻瓜”重构成“专家”的
本文分享了一次 Agent 项目的重构经验,讲述如何将一个僵化、被动的指令式系统,升级为具备内在驱动力的“专家”Agent。通过引入“动机层”和“成长机制”,让 Agent 更加主动、灵活并能自我优化,最终实现从“流水线工人”到“资深顾问”的蜕变。
|
5月前
|
人工智能 运维 云计算
专家对谈|AI推动文化传媒行业向“新”发展
随着“人工智能+”行动的深入推进,文化传媒行业正经历深刻变革。云计算与AI深度融合,重构内容生产、分发全流程,为行业注入新动能。预计到2025年,我国AI核心产业规模将破万亿,文化传媒作为技术应用先锋,以两位数增速迈向智能化。在CCBN活动现场,中央广播电视总台与阿里云探讨了大模型如何驱动行业升级,展望未来新图景。汪莹指出,大模型将重构文化消费形态,助力生产力与传播力倍增,推动中国文化走向世界。同时,解决AI应用“最后一公里”问题需产业链各方协同发力,基于现有大模型能力进行二次开发是切实可行路径。
288 4
|
8月前
|
人工智能 自然语言处理 数据可视化
YAYI-Ultra:中国企业终于等来『全能大脑』!开源企业级AI『混合专家』横扫金融舆情中医领域,最长生成20万字报告
YAYI-Ultra 是由中科闻歌研发的企业级大语言模型,具备强大的多领域专业能力和多模态内容生成能力,支持数学、代码、金融等多个领域的专家组合,缓解垂直领域迁移中的“跷跷板”现象。
303 10
YAYI-Ultra:中国企业终于等来『全能大脑』!开源企业级AI『混合专家』横扫金融舆情中医领域,最长生成20万字报告
|
8月前
|
人工智能 JSON 自然语言处理
AI 程序员的4个分身 | 代码生成专家+注释精灵+API集成助手+智能调试伙伴
AI 程序员的4个分身 | 代码生成专家+注释精灵+API集成助手+智能调试伙伴
356 35
|
8月前
|
数据采集 人工智能 编解码
算法系统协同优化,vivo与港中文推出BlueLM-V-3B,手机秒变多模态AI专家
BlueLM-V-3B是由vivo与香港中文大学共同研发的多模态大型语言模型,专为移动设备优化。它通过算法和系统协同优化,实现了高效部署和快速生成速度(24.4 token/s),并在OpenCompass基准测试中取得优异成绩(66.1分)。模型小巧,语言部分含27亿参数,视觉编码器含4000万参数,适合移动设备使用。尽管如此,低端设备可能仍面临资源压力,实际应用效果需进一步验证。论文链接:https://arxiv.org/abs/2411.10640。
243 9
|
9月前
|
人工智能 缓存 Ubuntu
AI+树莓派=阿里P8技术专家。模拟面试、学技术真的太香了 | 手把手教学
本课程由阿里P8技术专家分享,介绍如何使用树莓派和阿里云服务构建AI面试助手。通过模拟面试场景,讲解了Java中`==`与`equals`的区别,并演示了从硬件搭建、语音识别、AI Agent配置到代码实现的完整流程。项目利用树莓派作为核心,结合阿里云的实时语音识别、AI Agent和文字转语音服务,实现了一个能够回答面试问题的智能玩偶。课程展示了AI应用的简易构建过程,适合初学者学习和实践。
299 22
|
10月前
|
机器学习/深度学习 人工智能 智能设计
VisionFM:通用眼科 AI 大模型,具备眼科疾病诊断能力,展现出专家级别的准确性
VisionFM 是一个多模态多任务的视觉基础模型,专为通用眼科人工智能设计。通过预训练大量眼科图像,模型能够处理多种眼科成像模态,并在多种眼科任务中展现出专家级别的智能性和准确性。
457 4
VisionFM:通用眼科 AI 大模型,具备眼科疾病诊断能力,展现出专家级别的准确性

热门文章

最新文章