深度数据驱动的重建与交互

简介: 本文的整理自2017云栖大会-上海峰会上,浙江大学CAD&CG国家重点实验室百人计划研究员许威威分享讲义,讲义主要介绍了深度数据驱动的重建与交互。主要提到了现有重建方法的局限性,并简要展示了现在所需要的重建方法。

2017云栖大会-上海峰会上浙江大学CAD&CG国家重点实验室百人计划研究员许威威做了题为《深度数据驱动的重建与交互》的分享。通过处理分析室内场景发现,过去的重建方法不能满足现在的需求。就将简单的用户交互和自动对象分割和识别算法结合起来,创造了更高质量室内场景建模的交互式方法。


e4a3207f7a4795e8631dbc9beb6a9b436ad9d1a8 eb22bc31e0882e51f06fb7f5d82857ea5cf44241 4c31302d07535d7d53966febf6367d00deea8d82 e723b9043b70bf20eaaf23b4bdd4bb636968056d 63fdeda7cd26fbf0167af6c931b707defb6e9382 b8f52cae3b82551d900bbd56a03e3e109c2e1424 54e650cfea0bc1df7c34edb76197332df327faee 0cff83a6d5e5f266e10109edc58657627c8e7717 bc5fc382fba937f0f2c9181a6ab2890c9ace55b5 269b8a530ded1172ba0425726cb2b629571a5628 5857d38f60a5129182386808b4251229656208e3 bf64da8cbaeb8d8fa2a1559a233bcc32795c7084 4b4175c6e670c27f218b969e1b17b1901d863a39 f715deaa8751c9b968e73a984f1cc78569cef259 a0afa5b56caa25967fd01b0459c0cfb7647c7fec af499458a2c1a5cc6cd4287f2b884cd8c3f354d7 7a2643a574a041d21596d89a05b6d28c1d2d2abc e399108d35661a122c3f387fff2246f2a683f2a9 71195b42e5a04c4f35d345cf5e6068ba9d3aacff 3cbb82acd4818be7045c3102d786a0e7e09d137e 63a9782a18d60f5b29c18ebbb931d80f07cc27e5 a06df6819358d635b6e9b50ef19d479d2bfad532 8e05c850d1687c7fa94288dc07b0a0c18cb4e541 73dacfe27c5969354bffe96237777fb122fa0893 86b8963e87e210b28e4b327ebd0737e5a6af942d a2fb80db4f9f78ca22575a4e1461e568d37cc3d1 73d11b9b9c5541516a729c52bb1e2e17fc81f4c0 8bf9152b3c0cd905b2c30b3f2bc7e77d379b4cce 059ccb71ef8dd1ad6763e5277020d8dec1785e7d 7b93d77889355576fc90b46556955b8c0b30171c 9f080b951f521244c45a61e1ff796677af0d4726 c8d79cbaf1d268e91427f4cacb2b2a0394c3c31b c8137209646d381c75800ccc11af7ed89f147d65 8274f83d2621e35e092f58faa6b02813c33ad231 e9f7a293444960b775a44ed059da71d6d1a7b26b 631a20f52ee2023141a2cd214f4abdb67237ca2a 928b8932c67add522a2db9048940960f5216ca42 4cbde881b53abbf2259183f4e99d4721599d97b3 b53387677435361b021cb989968b7285fcf34ed0 6fc642849e2703bd6c722d304a15ee714a644e44 84e8b3890abe98a3a43ff07535a5929518b02c79 f2989ca8bd4e6aa51aac8d4ef9860c6431e1bdfb adde587187756d5063844536fc5c8c8aa023aaa2 4133e81a78bd38aefc9ba899f6c6f9731fa45ce2 fd36337bfa3f6e706ea35d50560bdb0633ec14e4 2e2afac6b7758bea7108f0a2ba460ebf7559130d fdaf0219618606e4f04dc0a8052980d196c00cf7 b970cd50df6a464e2d8260477ed6170024494e57
相关文章
|
1天前
|
人工智能 自然语言处理
WebDreamer:基于大语言模型模拟网页交互增强网络规划能力的框架
WebDreamer是一个基于大型语言模型(LLMs)的网络智能体框架,通过模拟网页交互来增强网络规划能力。它利用GPT-4o作为世界模型,预测用户行为及其结果,优化决策过程,提高性能和安全性。WebDreamer的核心在于“做梦”概念,即在实际采取行动前,用LLM预测每个可能步骤的结果,并选择最有可能实现目标的行动。
12 1
WebDreamer:基于大语言模型模拟网页交互增强网络规划能力的框架
|
4天前
|
开发框架 数据可视化 数据挖掘
进度追踪数据如何驱动决策?看板工具的隐藏优势
2分钟了解看板管理如何优化进度追踪。
24 6
进度追踪数据如何驱动决策?看板工具的隐藏优势
|
4天前
|
人工智能
突破视频多模态大模型瓶颈!合成数据立大功,项目已开源
针对视频多模态大模型(LMMs)因缺乏高质量原始数据而发展受限的问题,研究人员开发了LLaVA-Video-178K数据集,包含178,510个视频,涵盖详细字幕、开放性问题回答和多项选择题。此数据集通过结合GPT-4o和人工标注,实现了广泛视频来源、动态视频选择、递归字幕生成及多样化任务设计。基于此数据集训练的LLaVA-Video模型,在视频字幕、问答等任务上表现优异,且已开源,助力视频LMM的研究与发展。
22 7
|
17天前
|
机器学习/深度学习 存储 监控
实时特征处理框架:构建与优化实践
在大数据时代,实时特征处理框架在机器学习、数据分析和实时监控等领域扮演着至关重要的角色。这类框架能够快速处理和分析海量数据,为决策提供即时的洞察。本文将探讨实时特征处理框架的构建、优化及其在生产环境中的实践应用。
40 1
|
27天前
|
机器学习/深度学习 人工智能 算法
从数据增强的隐藏作用出发,揭示视觉强化学习可塑性损失的独特机制
【10月更文挑战第22天】视觉强化学习(VRL)通过智能体与环境的交互学习最优策略,但可塑性损失是其关键挑战。近期一篇论文《Revisiting Plasticity in Visual Reinforcement Learning: Data, Modules and Training Stages》通过实证研究,揭示了数据增强、评论家可塑性损失及早期干预在维持智能体可塑性方面的作用,并提出了一种动态调整重放率的方法,为解决高重放率困境提供了新思路。
31 2
|
1月前
|
机器学习/深度学习 人工智能 自然语言处理
扩散引导语言建模(DGLM):一种可控且高效的AI对齐方法
DGLM(Diffusion Guided Language Modeling)是一种新型框架,结合了自回归模型的流畅性和扩散模型的灵活性,解决了现有引导生成方法的局限性。DGLM通过扩散网络生成语义提案,并使用轻量级提示生成器将嵌入转化为软提示,引导自回归解码器生成文本。该方法无需微调模型权重,易于控制新属性,并在多个基准数据集上表现出色。实验结果显示,DGLM在毒性缓解、情感控制和组合控制等方面优于现有方法,为可控文本生成提供了新的方向。
47 10
扩散引导语言建模(DGLM):一种可控且高效的AI对齐方法
|
3月前
数据平台问题之在数据影响决策的过程中,如何实现“决策/行动”阶段
数据平台问题之在数据影响决策的过程中,如何实现“决策/行动”阶段
|
3月前
|
编解码 测试技术 计算机视觉
Sora视频重建与创新路线问题之VAR在技术上的自回归过程是如何实现的
Sora视频重建与创新路线问题之VAR在技术上的自回归过程是如何实现的
|
3月前
|
机器学习/深度学习 编解码 自然语言处理
Sora视频重建与创新路线问题之更高解析度的视频输出该如何实现
Sora视频重建与创新路线问题之更高解析度的视频输出该如何实现
|
6月前
|
人工智能 搜索推荐 测试技术
让智能体像孩子一样观察别人学习动作,跨视角技能学习数据集EgoExoLearn来了
【4月更文挑战第11天】EgoExoLearn是一个大规模数据集,用于模拟人类通过观察视频学习任务的能力,包含120小时的日常生活和实验室场景视频,重点是第一人称视角和注视数据。该数据集提供多模态注释,设有跨视角动作理解等基准测试,旨在推动AI模仿人类行为的研究。尽管有挑战,如视角转换和多样性问题,但EgoExoLearn为AI学习和融入人类环境开辟了新途径。
62 1
让智能体像孩子一样观察别人学习动作,跨视角技能学习数据集EgoExoLearn来了
下一篇
无影云桌面