Nature:盐粒大小的相机,可以拍出清晰彩色照片,未来或可应用到手机

简介: Nature:盐粒大小的相机,可以拍出清晰彩色照片,未来或可应用到手机

image.png

你能想象上图只有盐粒大小的物体是一款相机吗?

事实上,这款微型相机甚至可以拍出清晰的全彩图像,而相比之下,普通相机的尺寸要大50万倍。

我们可以来看看它的成片。

image.png

这款微型相机是普林斯顿大学和华盛顿大学的研究人员合作创造的一种新型的光学系统,这个系统依赖于一种叫做Metasurface的技术。

简单来说,研究人员先将相机的硬件缩小到合适的尺寸,并将其与神经网络图像处理技术相结合,使相机能够在自然光线下产生清晰的图像,而以往微型相机只能在完美的实验室环境下拍摄出有效的图像。

该研究也发表在Nature通讯上。

image.png

论文地址:

https://www.nature.com/articles/s41467-021-26443-0?utm_medium=affiliate&utm_source=commission_junction&utm_campaign=3_nsn6445_deeplink_PID100094349&utm_content=deeplink

每个镜片镶嵌着160万根圆柱,可以像电脑芯片一样生产

这个系统依赖于一种叫做Metasurface的技术,每个微型镜片镶嵌着160万根圆柱型立柱,每根柱子的大小大约相当于病毒大小。

每个柱子都有独特的几何形状,其功能就像光学天线。 为了正确地塑造整个光波前的形状,必须改变每个柱体的设计。

在基于机器学习的算法的帮助下,柱子与光线完美交互结合,为全彩Metasurface相机产生了最高质量的图像和最宽的视野。

相机创造的一个关键创新是光学表面和产生图像的信号处理算法的集成设计。 该研究的资深作者、普林斯顿大学计算机科学助理教授Felix Heide说,这提高了相机在自然光条件下的性能,而以前的超表面相机需要实验室的纯激光或其他理想条件才能产生高质量的图像。

image.png

左:2018年SOTA微型相机;右:本文介绍的应用Neural Nano-optics的微型相机

研究人员将他们的系统产生的图像与之前的Metasurface相机的结果进行了比较,以及使用一系列六个折射镜头的传统复合光学系统捕捉到的图像。

image.png

其他超紧凑型超表面透镜的图像畸变严重,视野小,捕捉全光谱可见光的能力有限——被称为RGB成像,因为它结合了红、绿、蓝来产生不同的色调。

“设计和配置这些小的纳米结构来做你想做的事,这是一个挑战,”普林斯顿大学计算机科学博士生Ethan Tseng说,他是这项研究的共同领导者。 “对于这种捕捉大视场RGB图像的特定任务,之前并不清楚如何将数百万个纳米结构与后处理算法一起共同设计。”  

据介绍,这款Metasurface相机可以像电脑芯片一样批量生产。

未来可以实现医疗机器人的微创内镜诊断和治疗疾病

通过对摄像机硬件和计算处理的联合设计,Metasurface系统可以帮助医疗机器人进行微创内窥镜诊断和治疗疾病,并改善其他受体积和重量限制的机器人的成像。

成千上万的这样的摄像机阵列还可以用于全景感应,将Metasurface变成摄像机。

Colburn在华盛顿大学电子与计算机工程系(UW ECE)攻读博士时进行了这项研究,他现在是该学院的助理教授。他还在西雅图的Tunoptix公司指导系统设计,该公司正在将这种Metasurface成像技术商业化。

Tunoptix是由科尔本的研究生顾问Arka Majumdar共同创立的,他是华盛顿大学欧洲经委会和物理系的副教授,也是这项研究的共同作者。

该研究的共同作者James   Whitehead是威斯康星大学欧洲经济学院的博士生,他利用氮化硅(一种类似玻璃的材料,与用于计算机芯片的标准半导体制造方法兼容)制造了Metasurface,这意味着Metasurface可以很容易地以比传统相机镜头以更低的成本进行批量生产。

Heide还设想将Metasurface应用到手机上。

“我们可以将单个Metasurface变成超高分辨率的摄像头,这样你就不再需要在你的手机背后安装三个摄像头,但你的整个手机背面将成为一个巨大的摄像头。”

相关文章
|
7月前
|
Android开发 开发者 UED
个人开发 App 成功上架手机应用市场的关键步骤
个人开发 App 成功上架手机应用市场的关键步骤
|
7月前
|
运维 监控 开发工具
应用研发平台EMAS产品常见问题之华为手机没收到通知如何解决
应用研发平台EMAS(Enterprise Mobile Application Service)是阿里云提供的一个全栈移动应用开发平台,集成了应用开发、测试、部署、监控和运营服务;本合集旨在总结EMAS产品在应用开发和运维过程中的常见问题及解决方案,助力开发者和企业高效解决技术难题,加速移动应用的上线和稳定运行。
|
1月前
|
Web App开发 定位技术 iOS开发
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
86 1
|
2月前
|
Web App开发 缓存 前端开发
拿下奇怪的前端报错(六):多摄手机webrtc拉取视频流会导致应用崩溃,从而无法进行人像扫描
本文介绍了一种解决手机摄像头切换导致应用崩溃的问题的方法。针对不支持facingMode配置的四摄手机,通过缓存和序号切换的方式,确保应用在特定设备上不会频繁崩溃,提升用户体验。
|
3月前
|
移动开发 Android开发 数据安全/隐私保护
移动应用与系统的技术演进:从开发到操作系统的全景解析随着智能手机和平板电脑的普及,移动应用(App)已成为人们日常生活中不可或缺的一部分。无论是社交、娱乐、购物还是办公,移动应用都扮演着重要的角色。而支撑这些应用运行的,正是功能强大且复杂的移动操作系统。本文将深入探讨移动应用的开发过程及其背后的操作系统机制,揭示这一领域的技术演进。
本文旨在提供关于移动应用与系统技术的全面概述,涵盖移动应用的开发生命周期、主要移动操作系统的特点以及它们之间的竞争关系。我们将探讨如何高效地开发移动应用,并分析iOS和Android两大主流操作系统的技术优势与局限。同时,本文还将讨论跨平台解决方案的兴起及其对移动开发领域的影响。通过这篇技术性文章,读者将获得对移动应用开发及操作系统深层理解的钥匙。
108 12
|
7月前
|
监控 定位技术 Android开发
如何获得你的准确位置及iphon手机应用定位不准确原因分析
如何获得你的准确位置及iphon手机应用定位不准确原因分析
228 0
|
7月前
|
Web App开发 前端开发 网络安全
前端分析工具之 Charles 录制 Android/IOS 手机的 https 应用
【2月更文挑战第21天】前端分析工具之 Charles 录制 Android/IOS 手机的 https 应用
114 1
前端分析工具之 Charles 录制 Android/IOS 手机的 https 应用
|
7月前
|
人工智能 机器人 UED
特斯拉手机应用上线AI聊天助手:特斯拉助手Beta版
【2月更文挑战第11天】特斯拉手机应用上线AI聊天助手:特斯拉助手Beta版
185 1
特斯拉手机应用上线AI聊天助手:特斯拉助手Beta版
|
7月前
|
运维 监控 Cloud Native
应用研发平台EMAS常见问题之尝试设置小米的通道但是小米手机收不到消息如何解决
应用研发平台EMAS(Enterprise Mobile Application Service)是阿里云提供的一个全栈移动应用开发平台,集成了应用开发、测试、部署、监控和运营服务;本合集旨在总结EMAS产品在应用开发和运维过程中的常见问题及解决方案,助力开发者和企业高效解决技术难题,加速移动应用的上线和稳定运行。
|
7月前
|
人工智能 搜索推荐 机器人
AI Agent涌向移动终端,手机智能体开启跨端跨应用业务连接新场景
AI Agent涌向移动终端,开启跨端跨应用业务连接新场景,手机智能体将成企业AIGC应用新标配。
174 0

热门文章

最新文章