今天要去清华听LeCun演讲?你需要这份笔记(另附:视频+PPT)

简介:
本文来自AI新媒体量子位(QbitAI)

△ 这张票有点抢手

早就没票了。

今天下午,Facebook人工智能研究院院长Yann LeCun,将在清华大礼堂主讲一场两个小时的讲座,题目是《深度学习与人工智能的未来》。

如何优雅的听好LeCun的分享?

当然是提前预习。还能预习?当然,其实可以把LeCun的演讲当成一个巡演。很少有明星在巡演的过程中发表全新的主打歌,这放在人工智能领域也一样。

同理,LeCun这次不可能在清华发表一次全新的分享。所以,如果能事先预习一下,对于在现场理解和学习肯定是大大的加成。

去哪儿找预习的内容?

别担心,量子位都给你准备好了。我们不单给你找到了LeCun此前同题分享的视频,而且还找到了一份高质量的学习笔记……贴心不?

这个笔记的作者Valerian Saliou,是Crisp公司的CTO,也是一个全栈工程师。这份《听LeCun分享后有感》的笔记,发布于去年10月27日。

哪怕你没搞到票,现在也不用着急了。因为LeCun要讲的主体思想(为什么感觉这个词怪怪的)是一致的。视频和笔记,这里都齐了。

当然能去现场最好,有票不去的同学,可以把票转给量子位……

视频

好吧,先把视频放出来。我们顺便也把YouTube自动配的英文字幕下载了,有需要的同学,可以在量子位微信公众号( ID:QbitAI )对话界面,回复“字幕”两个字即可获得。


笔记

然后,笔记的环节来了。再次感谢Valerian Saliou。

感知器:第一个学习机器

  ■ 我们今天使用的机器学习算法是感知器的后代

  ■ 加权总和,误差校正

   · 如果输出太低,增加所有输入为正的权重,并减少所有输入为负的权重

   · 如果输出太大,那就反过来做

  ■ 监督学习

   · 一个训练集

   · 一些例子,如果机器出错(或正确),你得调整权重

   · 模式识别的标准模型,从50年代至今都是“the only model in town”

   · 监督机器学习=功能优化

   · 随机梯度下降,意即针对某一案例,给予机器期望的答案并调整超参数,使得误差减小

   · 如何构建复杂的机器?如何推而广之,例如图像识别

  ■ 深度学习系统

   · 有数以亿计的“旋钮”

   · 每个识别需要数十亿次操作(输入到输出),所以使用GPU,而不是CPU

   · 搭建深度学习系统,不是单一模块,而是级联的模块

     1、特征提取器

     2、中级特征

     3、高级特征

     4、可训练分类器

   · 所有层(即模块)均可训练

   · 深度学习中深度的意思是有很多层

   · 图像由图案/对象组成,继续分解为各个部分,继续分解为像素

     · 低级特征探测像素

     · 中级特征探测部分

     · 高级特征探测图案/对象

   · 不仅对图像有效,还能用于文本、语音等。让世界变得可理解

   · 大脑的新皮层也是分层的

     · 中脑腹侧/识别路径也有很多层

     · 非常快(识别对象的过程需要不到100ms)

     · 反馈和推理对解释日常对象的影响非常小

多层神经网络

  ■ 反向传播算法

  ■ 用向量乘以矩阵

  ■ 阈值操作(非线性),例如:ReLU(x) = max(x,0)

  ■ 每个单元计算其输入的加权和

  ■ 加权和通过非线性函数传递

  ■ 学习的算法改变权重

  ■ 如何训练?

    · 使用反向传播算法

    · 框架:Torch,TensorFlow,Theano等

    · 雅可比矩阵(包含所有偏导数输出)

    · 将梯度乘以雅可比矩阵

  ■ ReLU:修正线性单元

卷积神经网络

  ■ 缩写:ConvNets或CNN

  ■ 网络中有两种层

    · 卷积

    · 池化

  ■ 针对AI工作的改进

    · ImageNet数据集,具有120万个标记的训练样本和1000个类别

    · NVIDIA CUDA,万亿op/s

    · 卷积的网络获取信任,然后人们都转向ConvNets

  ■  极深卷积网络架构

    · VGG

    · GoogLeNet

    · ResNet

  ■ 使用极深卷积网络

    · 解释图片

    · 人脸识别

    · 分类+定位(多尺度滑动窗口),用于识别人体在图片上的姿势

    · Big Sur:Facebook的深度学习引擎,由一堆GPU组成

     (量子位注:现在升级成Big Basin了,见报道)

    · 由于最近有更多人研究深度学习,所以进步加快了

可微分内存

生成对抗网络

  ■ DCGAN:https://[github.com/Newmu/dcgan_code](http://github.com/Newmu/dcgan_code)

P.S. 还有一份补充材料送给同学们:《LeCun详解预测学习:一小时视频+84页PPT》

欢迎加量子位小助手的微信:qbitbot,如果你研究或者从事AI领域,小助手会把你带入量子位的交流群里。

本文作者:若朴
原文发布时间: 2017-03-22 
相关文章
|
1月前
|
弹性计算 定位技术 数据中心
国内使用,阿里云服务器地域如何选择?哪个地域速度更快?
阿里云ECS国内有14个地域节点(如北京、杭州、深圳等),用户应根据物理距离就近选择,以降低网络延迟、提升访问速度。华北选北京、华南选深圳/广州、华东选杭州/上海为佳。阿里云服务器ECS官网:https://t.aliyun.com/U/AZBUsA
435 2
|
7月前
|
人工智能 安全 调度
1949AI 轻量化 AI 自动化办公场景应用方案 本地自动化工具与浏览器自动化实践
1949AI是一款轻量化AI办公自动化工具,基于Python实现,无需高性能算力,支持本地文件处理、网页数据抓取与Agent自主调度。模块化设计、低资源占用、全程离线运行,适配个人开发者与小型团队,安全合规、开箱即用。(239字)
|
9月前
|
机器学习/深度学习 监控 数据可视化
基于YOLOv8的停车场空车位目标检测项目|完整源码数据集+PyQt5界面+完整训练流程+开箱即用!
本项目基于YOLOv8实现停车场空车位智能检测,支持Occupied/Vacant双类别识别,集成PyQt5图形界面,兼容图片、视频、摄像头等多源输入。提供完整源码、标注数据集、预训练权重及详细教程,开箱即用,适用于毕设、科研与智慧停车原型开发。
基于YOLOv8的停车场空车位目标检测项目|完整源码数据集+PyQt5界面+完整训练流程+开箱即用!
|
8月前
|
人工智能 自然语言处理 前端开发
AI生成网站的技术架构解析:前端、后端与部署逻辑
本文解析AI生成网站的底层技术架构,涵盖前端(语义解析→组件抽象→代码生成)、后端(自动建模、API与鉴权生成)及部署(构建、打包、一键发布)三层逻辑,揭示其本质是开发抽象层级的跃升——从写代码转向描述需求,赋能快速验证与高价值创新。
|
2月前
|
人工智能 自然语言处理 监控
瓴羊AgentOne:以“能信、能干、能打”重塑企业级AI落地新范式
瓴羊AgentOne开创企业AI新范式:以Data、Agent、FDE三位一体,打造可落地的“AI员工”团队。2026年7月,AI销售、客服、运营、营销四大员工上岗,深度嵌入业务流,端到端交付GMV、ROI等结果,推动AI从聊天工具跃升为数字生产力。
|
3月前
|
人工智能 前端开发 Java
AI Agent 到底是什么?剥开营销外衣,看清它的骨架与血肉
Agent 是一种让大模型自主执行“感知—思考—行动—观察”闭环的运行范式,核心在于通过工具调用、记忆与规划实现目标驱动的多步推理与交互,而非简单问答。
439 1
|
7月前
|
编译器 Go PHP
FrankenPHP 原生支持 Windows 了
FrankenPHP 正式原生支持 Windows!基于 Go 1.26 对 MSVC Clang 的 CGO 支持,成功打通与官方 PHP(MSVC 编译)的链接难题,实现 100% 特性兼容——含 Worker Mode、Hot Reloading 及全部扩展。性能较 Nginx/PHP-FPM 提升超 260%,开箱即用。(239字)
584 157
|
3月前
|
弹性计算 关系型数据库 MySQL
阿里云Linux云服务器部署MySQL数据库:从零搭建到生产级运维全攻略
本文系统性地讲解在阿里云ECS Linux实例上部署MySQL数据库的完整流程,涵盖环境准备、YUM/DNF安装、安全初始化、用户权限管理、远程访问配置、性能参数调优、日常备份恢复策略以及高频故障排查。文章基于Alibaba Cloud Linux 3、CentOS 7/8等主流发行版,提供了可直接复用的命令脚本和配置文件示例,帮助读者从零开始搭建一个安全、稳定、高效的自建MySQL生产环境。
|
5月前
|
安全 Linux 网络安全
云服务器上线后必须完成的安全设置清单
云服务器上线前,务必完成基础安全配置:关闭非必要服务、使用强密码或SSH密钥、修改默认远程端口、限制登录IP、禁用root直连、及时更新补丁、精细配置防火墙、监控关键日志、定期备份并验证恢复。安全无小事,基础防护是稳定运营的第一道防线。(239字)
626 0
云服务器上线后必须完成的安全设置清单
|
4月前
|
人工智能 JSON API
嘴炮Hermes:我干完了!实际啥也没做,咋整?
本文揭秘AI Agent“嘴炮”现象(执行幻觉):模型不真实调用工具,却编造看似完美的执行报告。以Hermes生成壁纸任务为例,剖析其成因——LLM本质是概率文本生成器。提出两大缓解方案:开启`tool_use_enforcement: true`强制校验 + 在SOUL.md中植入“执行铁律”,显著降低幻觉率。
378 0