借助独特2D材料和机器学习,CV像人一样「看见」数百万种颜色

简介: 借助独特2D材料和机器学习,CV像人一样「看见」数百万种颜色

这项技术代表着机器视觉迈出了一大步,并将被广泛应用于自动驾驶汽车、农业分拣和远程卫星成像等更广泛的领域。


人的眼睛可以看见数百万种颜色,现在人工智能也可以。


近日,来自美国东北大学的一个跨学科研究团队使用新的人工智能技术构建了一种可以识别数百万种颜色的新设备 A-Eye,这让机器视觉领域迈出了一大步,将被广泛应用于自动驾驶汽车、农业分拣和远程卫星成像等一系列技术。


研究论文发表在了《Materials Today》上。



论文地址:https://www.sciencedirect.com/science/article/abs/pii/S1369702122002255


该研究通讯作者、东北大学物理学副教授 Swastik Kar 说:「随着自动化越来越广泛,机器识别物体颜色和形状的能力也越来越重要。」


东北大学物理学副教授 Swastik Kar


该研究设计了一种具有特殊量子特性的 2D 材料,将其嵌入光线进入 A-Eye 机器的光学窗口,就能以「非常高的精度」处理丰富多样的颜色——这是前所未有的。


此外,A-Eye 能够准确地识别和再现「看到」的颜色,与原始光谱零偏差。这得益于由美国东北大学电气和计算机工程助理教授 Sarah Ostadabbas 领导的 AI 研究团队开发的机器学习算法。


整个研究的主要技术集中在一类称为过渡金属二硫化物材料(Transition Metal Dichalcogenides)的量子和光学特性上,这种独特的材料一直被认为具有无限的潜力,特别是在传感和储能应用方面。


研究概述


在识别颜色时,机器通常使用传统的 RGB(红、绿和蓝)过滤器将颜色分解为组成成分,然后使用该信息从本质上猜测并再现色光三原色。当你把数码相机对准一个有色物体并拍照时,来自该物体的光线会穿过一组检测器,而这些检测器前面配有过滤器用于将光线区分为这些原始 RGB 颜色。

Kar 表示,「你可以将滤色器看作将视觉信息或数据传送到单独盒子(seperate box)的 funnel,然后这些 funnel 将人造数字分配给自然色。」但如果只是将颜色分解为三个组成成分(红、绿和蓝),则会有一些限制。


然而,Kar 和他的团队没有使用滤色器,而是使用由独特的 2D 材料制成的「透射窗口」(transmissive windows)。


Kar 称他们正在让机器(即 A-Eye)通过一种截然不同的方式来识别颜色。当有色光线照射在探测器上时,研究人员没有将它分解为主要的红、绿和蓝色成分,也不仅仅是寻找这些成分,而是使用了整个光谱信息。


最重要的是,研究人员使用了一些技术来修改和编码这些成分,并以不同的方式存储它们。因此,他们得到了一组数字,并能够以非常不同于传统的方式来识别三原色。


下图左上为构建 A-Eye 使用的 2D 材料,右上为 A-Eye 的工作流,图下为测试颜色与 A-Eye 估计的颜色对比。



另一位作者 Sarah Ostadabbas 表示,当光线穿过这些透射窗口时,A-Eye 将颜色处理为数据。并且内置的机器学习模型可以寻找模式以更好地识别 A-Eye 分析出的相应颜色。


同时,A-Eye 还可以通过将任何正确的猜测添加到其训练数据集中,来不断地改进颜色估计结果。

相关文章
|
6月前
|
机器学习/深度学习 数据可视化 计算机视觉
【视频】机器学习交叉验证CV原理及R语言主成分PCA回归分析犯罪率|数据共享
【视频】机器学习交叉验证CV原理及R语言主成分PCA回归分析犯罪率|数据共享
|
机器学习/深度学习 人工智能 算法
CV领域再创佳绩!阿里云机器学习平台 PAI 多篇论文入选 ICCV 2023
近期,阿里云机器学习平台PAI发表的多篇论文在ICCV 2023上入选。ICCV是国际计算机视觉大会是由电气和电子工程师协会每两年举办一次的研究大会。与CVPR和ECCV一起,它被认为是计算机视觉领域的顶级会议之一。ICCV 2023将于10月2日至10月6日法国巴黎举办。ICCV汇聚了来自世界各地的学者、工程师和研究人员,分享最新的计算机视觉研究成果和技术进展。会议涵盖了计算机视觉领域的各个方向,包括图像处理、模式识别、机器学习、人工智能等等。ICCV的论文发表和演讲都备受关注,是计算机视觉领域交流和合作的重要平台。
|
存储 机器学习/深度学习 编解码
【阿旭机器学习实战】【19】如何在不减少分辨率的情况下降低图片存储空间?K-Means算法进行图片颜色点分类存储
【阿旭机器学习实战】【19】如何在不减少分辨率的情况下降低图片存储空间?K-Means算法进行图片颜色点分类存储
【阿旭机器学习实战】【19】如何在不减少分辨率的情况下降低图片存储空间?K-Means算法进行图片颜色点分类存储
|
机器学习/深度学习 编解码 数据可视化
提高CV模型训练性能的 9 个技巧
提高CV模型训练性能的 9 个技巧
218 0
|
机器学习/深度学习 存储 数据采集
深度学习与CV教程(2) | 图像分类与机器学习基础
图像分类是计算机视觉的核心任务。本文讲解数据驱动的模型算法,包括最邻近算法、KNN分类器、线性分类器的原理、各自的优缺点和实际应用【对应 CS231n Lecture 2】
1714 4
深度学习与CV教程(2) | 图像分类与机器学习基础
|
机器学习/深度学习 计算机视觉 Python
关于python机器学习cross_val_score()交叉检验的参数cv实际默认为5这件事,你怎么看?
关于python机器学习cross_val_score()交叉检验的参数cv实际默认为5这件事,你怎么看?
589 0
关于python机器学习cross_val_score()交叉检验的参数cv实际默认为5这件事,你怎么看?
|
机器学习/深度学习 前端开发 PyTorch
Datawhale 零基础入门CV赛事-Task4 模型训练与验证
Datawhale 零基础入门CV赛事-Task4 模型训练与验证
167 0
|
机器学习/深度学习 SQL 编解码
机器学习数据集!CV、NLP 一应俱全
机器学习数据集!CV、NLP 一应俱全
机器学习数据集!CV、NLP 一应俱全
|
机器学习/深度学习 计算机视觉
CV之FC(H+k机器学习):基于每人几张人脸图片训练H+k模型实现(国内外明星)新人脸图像的姓名预测(准确度高达100%)
CV之FC(H+k机器学习):基于每人几张人脸图片训练H+k模型实现(国内外明星)新人脸图像的姓名预测(准确度高达100%)
CV之FC(H+k机器学习):基于每人几张人脸图片训练H+k模型实现(国内外明星)新人脸图像的姓名预测(准确度高达100%)
|
机器学习/深度学习 自然语言处理 算法

热门文章

最新文章