AI：2020年6月22日北京智源大会演讲分享之09:40-10:10Mari 教授《基于显式上下文表征的语言处理》、10:10-10:40周明教授《多语言及多模态任务中的预训练模型》
2022-07-23
111
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
AI：2020年6月22日北京智源大会演讲分享之09:40-10:10Mari 教授《基于显式上下文表征的语言处理》、10:10-10:40周明教授《多语言及多模态任务中的预训练模型》
目录
相关文章
|
11天前
|
机器学习/深度学习
人工智能
自然语言处理
当语言遇见智慧火花：GPT家族历代模型大起底，带你见证从平凡到卓越的AI进化奇迹！
【10月更文挑战第6天】随着自然语言处理技术的进步，GPT系列模型（Generative Pre-trained Transformers）成为该领域的明星。从GPT-1的开创性工作，到GPT-2在规模与性能上的突破，再到拥有1750亿参数的GPT-3及其无需微调即可执行多种NLP任务的能力，以及社区驱动的GPT-NeoX，这些模型不断进化。虽然它们展现出强大的语言理解和生成能力，但也存在如生成错误信息或偏见等问题。本文将对比分析各代GPT模型的特点，并通过示例代码展示其部分功能。
48
2
2
|
23天前
|
机器学习/深度学习
人工智能
自然语言处理
扩散引导语言建模(DGLM):一种可控且高效的AI对齐方法
DGLM（Diffusion Guided Language Modeling）是一种新型框架，结合了自回归模型的流畅性和扩散模型的灵活性，解决了现有引导生成方法的局限性。DGLM通过扩散网络生成语义提案，并使用轻量级提示生成器将嵌入转化为软提示，引导自回归解码器生成文本。该方法无需微调模型权重，易于控制新属性，并在多个基准数据集上表现出色。实验结果显示，DGLM在毒性缓解、情感控制和组合控制等方面优于现有方法，为可控文本生成提供了新的方向。
35
10
10
|
1天前
|
人工智能
安全
搜索推荐
北大计算机学院再登国际AI顶刊！张铭教授团队揭露医疗AI致命漏洞
【10月更文挑战第16天】北京大学张铭教授团队在国际顶级人工智能期刊上发表重要成果，揭示了医疗AI系统中的致命漏洞——“模型反演”。该漏洞可使攻击者通过特定数据样本误导AI诊断，引发误诊风险。此发现引起广泛关注，强调了医疗AI安全评估的重要性。
9
4
4
|
4天前
|
人工智能
自然语言处理
从迷茫到精通：揭秘模型微调如何助你轻松驾驭AI新热点，解锁预训练模型的无限潜能！
【10月更文挑战第13天】本文通过简单的问题解答形式，结合示例代码，详细介绍了模型微调的全流程。从选择预训练模型、准备新任务数据集、设置微调参数，到进行微调训练和评估调优，帮助读者全面理解模型微调的技术细节和应用场景。
23
6
6
|
1月前
|
人工智能
测试技术
语言图像模型大一统！Meta将Transformer和Diffusion融合，多模态AI王者登场
【9月更文挑战第20天】Meta研究人员提出了一种名为Transfusion的创新方法，通过融合Transformer和Diffusion模型，实现了能同时处理文本和图像数据的多模态模型。此模型结合了语言模型的预测能力和Diffusion模型的生成能力，能够在单一架构中处理混合模态数据，有效学习文本与图像间的复杂关系，提升跨模态理解和生成效果。经过大规模预训练，Transfusion模型在多种基准测试中表现出色，尤其在图像压缩和模态特定编码方面具有优势。然而，其训练所需的大量计算资源和数据、以及潜在的伦理和隐私问题仍需关注。
63
7
7
|
2月前
|
存储
边缘计算
人工智能
【边缘计算与AI】分析边缘计算在处理AI任务、优化响应速度和数据隐私保护方面的作用和潜力
边缘计算与AI的结合是当前技术发展的重要趋势，两者相互依存、相互促进，共同推动着数字化转型的深入发展。以下是对边缘计算与AI关系的详细分析
79
6
6
|
2月前
|
人工智能
数据处理
|
2月前
|
人工智能
语音技术
|
2月前
|
人工智能
JavaScript
Go
|
2月前
|
SQL
人工智能
SEO
热门文章
最新文章
1
阿里AI上岗双11服装车间，能识别头发丝直径十分之一的瑕疵
2
未来已来！阿里小蜜AI技术揭秘
3
业界首个AI云服务报告：阿里云进入领导者象限，力压亚马逊、微软
4
看三角兽的AI语义技术如何让机器更懂你|镁客网M-TECH AI助力中国智造产业论坛
5
引入AI技术 百会发布第四代智能CRM
6
《中国人工智能学会通讯》——9.18 评价指标
7
普通人眼中的 AI 是什么样子？
8
辰信领创联合发起创新战略联盟 网络安全与人工智能融合提速
9
对话清华大学张钹院士：中国人工智能与 IJCAI 的 40 周年，还有哪些未曾对外诉说的故事？
10
硬纪元AI峰会前瞻：如何才能做好智能家居？用户体验最重要
1
在园区引入AI大模型
75
2
AI创作之旅：探索提示工程的奇妙世界
51
3
AI时代Python金融大数据分析实战：ChatGPT让金融大数据分析插上翅膀
310
4
构建未来：AI在持续学习系统中的进化之路
118
5
AI超级个体：ChatGPT与AIGC实战指南
277
6
构建未来：AI驱动的自适应网络安全防御系统
69
7
[译][AI OpenAI-doc] v2 有什么新功能？Beta
37
8
AI面试：线下面试的“隐形门槛”及其影响
95
9
吴恩达 x Open AI ChatGPT ——如何写出好的提示词视频核心笔记
302
10
ElasticON AI 2023大会回顾：深入探索 Elasticsearch 与人工智能的融合之路
75