一周AI最火论文 | 点点手指变换UI设计风格,斯坦福发布基于计算机视觉的UI设计工具

简介: 一周AI最火论文 | 点点手指变换UI设计风格,斯坦福发布基于计算机视觉的UI设计工具

本周最佳学术研究

基于神经样式转移的APP样式转换

斯坦福大学的研究人员介绍了ImageNet,使得终端用户和app开发人员可以通过样式转换的方法,使用他们选择的图像来重新设置GUI的样式。样式转移是指从参考图像中提取样式并将其应用于输入图像,是一项计算机视觉任务。

与传统的图像转换(如模糊、锐化和颜色转换)相比,该技术使用了了可以生成更丰富、更美丽且更多样化结果的结构。研究人员向50位评估者展示了使用ImagineNet和其他样式转换技术重新设计过的几种GUI,而所有人都偏好ImagineNet设计的样式。

与以前在内容中添加处理步骤以保留细节的做法不同,ImageNet从样式中复制了更多信息。该方法使终端用户可以使用他们选择的艺术品来重新设计app界面的样式,从而有效地使著名艺术家的技能变得触手可及。具体来说,ImagineNet可用于重新设计:

  • App的图形资产
  • 包含用户提供内容的app
  • 包含动态生成GUI的app

这个方法是未来技术发展的起点。即便是与当今最前沿的技术相比,我们也可以期待在未来看到更精美的app设计。

原文:

https://arxiv.org/abs/2001.04932v1

基于深度3D网络的按需实体纹理合成

在本文中,研究人员介绍了实体纹理合成的最新技术,然后介绍了使用卷积神经网络(CNN)进行2D纹理合成的一些成功应用。本文介绍的方法是采用CNN生成器按需合成实体纹理的首个方法。

按需生成实体纹理所需的部分对于稳定的纹理合成至关重要,因为对于大多数应用领域而言,以有用的分辨率存储整个实体纹理的价格是非常昂贵的。

该方法建立在先前基于示例合成2D纹理的CNN方法的基础上,提供了仅生成实体纹理所需部分的功能。研究人员还提到了相关的使用2D视图生成3D对象的CNN方法。

该方法可以得到一个简单轻便的网络,可以在生成体积的横截面沿着一到三个方向重现示例的视觉特征。

纹理合成可以用于填充图像中的空隙(例如修复),扩展小图片和生成巨大且不重复的背景图像。

本文提出的方法是有关的常规按需技术的必要改进。它仅生成必要的实体组件,因此有助于加速纹理化表面并节省内存。它很好地解决了基于补丁的2D和实体纹理方法遗留的问题。

该方法证实了合成逼真纹理的能力,也是向实现3D计算机图形、图像编辑、电影后期制作等领域的稳健应用迈进的重要一步。

原文:

https://arxiv.org/abs/2001.04528v1

GoogleResearch:回顾2019,展望2020和更远的未来

GoogleResearch专注于解决对人们的日常生活有极大帮助的问题。他们在最近发布的一篇文章中公布了2019年所做的所有研究工作。

他们在各种基础研究领域取得了进展、开源了各种代码并与各种团队继续合作来构建对终端用户更有用的工具和服务。

例如,在发展开发人员和AI研究社区方面,他们推出了TensorFlow 2.0,使ML系统和应用变得更加容易。他们还增加了对移动GPU推断的支持,推出了Teachable Machine 2.0(无需编码即可训练ML模型的工具)等。

在数据集领域,他们启动了多个数据集,来帮助ML社区探索不同的研究领域并负责任地共享开放数据。

大致来讲,你会在本文中找到一个令人兴奋的摘要(你肯定不想错过),其中列出了2019年完成的研究的全部清单,涉及包括AI伦理学、AI 造福社会、AI挑战、辅助技术、量子计算、通用算法和理论、AutoML、自然语言理解和机器人技术等在内的很多领域。

对于Google Research以及更广泛的研究社区而言,这是令人振奋的一年。就像Google Research一样,整个机器学习社区应该为我们在2019年的成就和2020年面临的挑战而感到兴奋。

原文:

https://ai.googleblog.com/2020/01/google-research-looking-back-at-2019.html

轻量级光流卷积神经网络

FlowNet和FlowNet2是实现光流估计的一些最新的CNN方法。但是要实现准确的流量估算,FlowNet2需要超过1.6亿个参数,并且运行速度很慢。

为了应对这一挑战,基于FlowNet2,研究人员现在开发了一种轻量且有效的卷积网络版本,他们将其称为LiteFlowNet2。新方法通过采用数据保真和基于变分的正则化,解决了经典的光流估计问题。

相较于FlowNet2,新方法在Sintel和KITTI基准测试上都表现更好,模型尺寸小了25.3倍,运行速度快了3.1倍。LiteFlowNet2也在常规方法的基础上,起到了类似于变型方法中数据保真和正则化的作用。

任何机器学习模型的目标都是在使用最少资源的同时获得准确的结果。

与传统技术相比,LiteFlowNet2具有轻量,准确和快速的流量计算功能,因此可以部署在诸如视频处理,视觉里程计,运动分割,动作识别,运动估计,SLAM,3D重建等应用中。

网络协议与训练模型:

https://github.com/twhui/LiteFlowNet2

原文:

https://arxiv.org/abs/1903.07414v2

如果机器人拥有计算机视觉魔法

计算机视觉处于快车道,而机器人技术处于慢车道。那么,机器人专家如何才能进入他们从事计算机视觉同事的快车道?

计算机视觉和机器人技术研究社区都始于相似的起点,但如今在会议和期刊,研究方法和研究速度方面存在很大的分歧。计算机视觉是基于评估而不是实验的,在过去的一年中研究人员渐渐意识到了对真实机器人进行评估的重要性,但与此同时也涉及许多挑战。

在这项工作中,研究人员提出了许多大胆的断言,他们认为应该在研究界内进行辩论,以提高我们机器人技术的集体创新速度。总结如下:

  • 标准数据集+竞争(评估指标+竞争者+竞争)+快速传播→快速进步
  • 没有竞争的数据集对进度的影响收效甚微
  • 为推动进步,研究人员应将他们的思维方式从实验转变为评估
  • 仿真是我们重复评估机器人性能的唯一方法
  • 研究人员可以使用新的 和新的指标来推动研究社区的发展

为了增加真实机器人对视觉研究社区的访问能力,他们提出并开发了BenchBot系统。BenchBot是一个在线门户,它使世界各地的研究人员都可以在真实、公平和平等的环境中,远程对各种类型的真实机器人进行机器学习和计算机视觉系统测试。

通过使研究人员访问原本可能无法访问的真实机器人,BenchBot的目标是使机器人民主化。它大大降低了研究需求门槛,无需拥有机器人、操作空间、操作人员或者精通ROS。

该代码已经开源,世界各地的其他研究实验室都可以复制BenchBot的设置,甚至可以建立更多在线门户,容纳更多研究人员在真实的机器人硬件上远程测试其算法。BenchBot的最终目标是允许在真实机器人上测试各种算法,成为机器人研究的标准化测试。

原文:

https://arxiv.org/abs/2001.02366v1

其他爆款论文

首届语音识别系统错误纠正公开挑战赛开幕,致力于提高自动语音识别系统的性能:

https://arxiv.org/abs/2001.03041v1

评估数据集移位下的预测不确定性。本文提出了关于现有分类问题最新方法的大规模基准,并评估了数据集偏移对准确性和校准的影响:

https://arxiv.org/abs/1906.02530

理论进,理论出:社会理论如何解决机器学习无法解决的问题。本文旨在指导计算机和社会科学家解决将机器学习工具应用于社会数据所涉及的问题:

https://arxiv.org/abs/2001.03203v2

代理可以类比学习吗?与基于最新模型算法的可推断模型相比,PAC强化学习的计算效率更高:

https://arxiv.org/abs/1912.10329v1

第一次尝试使用预训练的深度学习模型来增强针对迁移学习的后门攻击:

https://arxiv.org/abs/2001.03274v1

AI大事件

只有14.6%的公司在生产中部署了AI功能:

https://www.forbes.com/sites/gilpress/2020/01/13/ai-stats-news-only-146-of-firms-have-deployed-ai-capabilities-in-production/#7894fb7d2650

人工智能和人类软技能将成为2020年代的领导重点:

https://www.zdnet.com/article/ai-and-human-soft-skills-will-drive-leadership-priorities-in-2020s-linkedin-survey-finds/

披萨巨头达美乐正在利用英伟达GPU来加速和改善其AI驱动的应用程序:

https://blogs.nvidia.com/blog/2020/01/13/dominos-pizza-ai/


相关文章
|
19天前
|
机器学习/深度学习 人工智能 自然语言处理
Sketch2Lineart:AI绘画工具,自动将手绘草图转换成清晰的线条画
Sketch2Lineart是一款基于人工智能的绘画工具,能够自动将手绘草图转换成清晰的线条画。该工具支持多种功能,如草图转线稿、自动描述生成、细节调整和风格定制等,适用于艺术创作、产品设计、教育培训等多个领域。
131 60
Sketch2Lineart:AI绘画工具,自动将手绘草图转换成清晰的线条画
|
1天前
|
人工智能 自然语言处理 搜索推荐
你用过最好用的AI工具是什么?
2023年AI革命风起云涌,众多产品令人振奋。我体验了OpenAI的ChatGPT、微软New Bing、Anthropic Claude等多款AI产品。特别推荐微软New Bing,它集成了强大的搜索引擎和语言模型,回答问题精准,提供最新信息,还能免费进行创意绘图。此外,New Bing还集成了Copilot网页助手,帮助用户高效提取和总结内容。
48 27
你用过最好用的AI工具是什么?
|
9天前
|
编解码 人工智能 监控
VISION XL:支持四倍超分辨率的 AI 视频修复处理工具,提供去除模糊、修复缺失等功能
VISION XL是一款基于潜在扩散模型的高效视频修复和超分辨率工具,能够修复视频缺失部分、去除模糊,并支持四倍超分辨率。该工具优化了处理效率,适合快速处理视频的应用场景。
52 6
VISION XL:支持四倍超分辨率的 AI 视频修复处理工具,提供去除模糊、修复缺失等功能
|
16天前
|
存储 人工智能 数据库
Codel:AI代理工具,支持在终端、浏览器、编辑器执行复杂任务和项目
Codel是一款全自主AI代理工具,支持在终端、浏览器和编辑器中执行复杂任务和项目。它运行在沙盒化的Docker环境中,具备自主操作能力,内置浏览器和文本编辑器,所有操作记录存储于PostgreSQL数据库。Codel能够自动完成复杂任务,如创建项目结构、进行网络搜索等,适用于自动化编程、研究与开发、教育与培训以及数据科学与分析等多个领域。
55 11
Codel:AI代理工具,支持在终端、浏览器、编辑器执行复杂任务和项目
|
18天前
|
机器学习/深度学习 人工智能 自然语言处理
Voice-Pro:开源AI音频处理工具,集成转录、翻译、TTS等一站式服务
Voice-Pro是一款开源的多功能音频处理工具,集成了语音转文字、文本转语音、实时翻译、YouTube视频下载和人声分离等多种功能。它支持超过100种语言,适用于教育、娱乐和商业等多个领域,为用户提供一站式的音频处理解决方案,极大地提高工作效率和音频处理的便捷性。
89 10
Voice-Pro:开源AI音频处理工具,集成转录、翻译、TTS等一站式服务
|
17天前
|
Web App开发 机器学习/深度学习 人工智能
Magic Copy:开源的 AI 抠图工具,在浏览器中自动识别图像进行抠图
Magic Copy 是一款开源的 AI 抠图工具,支持 Chrome 浏览器扩展。它基于 Meta 的 Segment Anything Model 技术,能够自动识别图像中的前景对象并提取出来,简化用户从图片中提取特定元素的过程,提高工作效率。
58 7
Magic Copy:开源的 AI 抠图工具,在浏览器中自动识别图像进行抠图
|
19天前
|
人工智能 自然语言处理 算法
Devika AI:开源的 AI 软件开发工具,理解和执行复杂的人类指令
Devika AI 是一款开源的 AI 软件开发工具,能够理解和执行复杂的人类指令。它通过分解任务、信息搜集和代码生成,帮助开发者提高效率,减少人工干预。本文将详细介绍 Devika AI 的功能、技术原理以及如何运行和配置该工具。
45 9
Devika AI:开源的 AI 软件开发工具,理解和执行复杂的人类指令
|
22天前
|
人工智能 Ubuntu 语音技术
ebook2audiobookXTTS:开源电子书转有声书 AI 工具,支持 16 种语言
ebook2audiobookXTTS 是一款开源的 AI 工具,能够将电子书转换为有声书,支持多种电子书格式和 16 种语言。该工具利用 Coqui XTTS 技术实现高质量的文本到语音转换,并提供命令行、Web 界面和 Docker 容器等多种使用方式。
54 3
ebook2audiobookXTTS:开源电子书转有声书 AI 工具,支持 16 种语言
|
22天前
|
人工智能 小程序 IDE
【一步步开发AI运动小程序】九、姿态辅助调试桌面工具的使用
随着AI技术的发展,各大厂商推出的AI运动APP如“乐动力”、“天天跳绳”等,使云上运动会、线上健身等概念大热。本文将指导你如何利用“云智AI运动识别小程序插件”,在微信小程序中实现类似功能,包括工具搭建、服务启动及数据回传等步骤,助力开发者高效开发AI运动小程序。
【一步步开发AI运动小程序】九、姿态辅助调试桌面工具的使用
|
1天前
|
机器学习/深度学习 人工智能 算法
X-AnyLabeling:开源的 AI 图像标注工具,支持多种标注样式,适于目标检测、图像分割等不同场景
X-AnyLabeling是一款集成了多种深度学习算法的图像标注工具,支持图像和视频的多样化标注样式,适用于多种AI训练场景。本文将详细介绍X-AnyLabeling的功能、技术原理以及如何运行该工具。
18 2
X-AnyLabeling:开源的 AI 图像标注工具,支持多种标注样式,适于目标检测、图像分割等不同场景