面向初学者的卷积神经网络

简介: 面向初学者的卷积神经网络

卷积神经网络在机器学习中非常重要。如果你想做计算机视觉或图像识别任务,你根本离不开它们。但是很难理解它们是如何工作的。

在这篇文章中,我们将讨论卷积神经网络背后的机制、它的优点和应用领域。


什么是神经网络?


首先,让我们复习一下神经网络(Neural Networks, NN)的一般工作原理。

任何神经网络,从简单的感知器到巨大的企业人工智能系统,都由模仿人脑神经元的节点组成。这些细胞紧密相连。节点也是如此。

神经元通常被组织成独立的层。神经网络的一个例子是前馈神经网络。数据从输入层通过一组隐藏层仅沿一个方向移动,就像水通过过滤器一样。

系统中的每个节点都连接到上一层和下一层中的某些节点。节点从其前面的层接收信息,对其执行某些操作,并将信息发送到下一层。

每个传入连接都分配有一个权重。这是一个数字,节点在从不同节点接收数据时将输入乘以该数字。

节点通常使用多个传入值。 然后,它将所有内容总结在一起。


有几种可能的方法可以决定是否应将输入传递到下一层。例如,如果使用单位阶跃函数,则如果节点的值低于阈值,则节点不会将数据传递到下一层。如果数字超过阈值,节点将向前发送数字。然而,在其他情况下,神经元可以简单地将输入投影到某个固定值段中。


当神经网络首次被训练时,它的所有权重和阈值都是随机分配的。一旦训练数据被馈送到输入层,它就会穿过所有层,最终到达输出。在训练期间,将调整权重和阈值,直到具有相同标签的训练数据始终提供相似的输出。这称为反向传播。你可以在 TensorFlow Playground 中看到它是如何工作的。


简单 NN 有什么问题?


常规的人工神经网络不能很好地扩展。例如,在通常用于训练计算机视觉模型的数据集 CIFAR 中,图像的大小仅为 32x32 像素,并且具有 3 个颜色通道。这意味着该神经网络第一隐藏层中的单个全连接神经元将具有 32x32x3 = 3072 个权重。它仍然是可管理的。但是现在想象一个更大的图像,例如,300x300x3。它将有 270000 个权重(训练需要如此多的计算能力)!

像这样的庞大神经网络需要大量资源,但即便如此,仍然容易过度拟合,因为大量的参数使其能够只记住数据集。

卷积神经网络(Convolutional Neural Networks, CNN)使用参数共享。特定特征图中的所有神经元共享权重,这使得整个系统的计算强度降低。


CNN 是如何工作的?


卷积神经网络只是使用卷积的神经网络。为了理解原理,我们将首先使用二维卷积。


什么是卷积?


卷积是一种数学运算,允许合并两组信息。在 CNN 的情况下,卷积应用于输入数据以过滤信息并生成特征图。


此滤波器也称为内核或特征检测器,其尺寸可以是 3x3。为了执行卷积,内核遍历输入图像,一个又一个元素地执行矩阵乘法。每个感受野(发生卷积的区域)的结果都写在特征图中。

我们继续滑动滤波器,直到特征图完成。


填充(Padding )和步幅(Striding )


在我们进一步讨论之前,讨论填充和步幅也很有用。这些技术通常用于 CNN:

  • 填充:填充通过将假像素添加到矩阵的边框来扩展输入矩阵。这样做是因为卷积减小了矩阵的大小。例如,当筛选器经过 5x5 矩阵时,它会变成 3x3 矩阵。
  • 步幅:经常发生的情况是,在使用卷积层时,您需要获得小于输入的输出。实现此目的的一种方法是使用池化层。实现此目的的另一种方法是使用步幅。Striding 背后的想法是在内核滑过时跳过某些区域:例如,每 2 或 3 个像素跳过一次。它降低了空间分辨率,使网络的计算效率更高。

填充和步幅可以帮助更准确地处理图像。

对于现实生活中的任务,卷积通常在 3D 中执行。大多数图像具有 3 个维度:高度、宽度和深度,其中深度对应于颜色通道 (RGB)。因此,卷积滤波器也需要是三维的。以下是相同操作在 3D 中的外观。

卷积层中有多个滤波器,每个滤波器都会生成一个滤波器映射。因此,图层的输出将是一组相互堆叠的滤波器映射。

例如,填充 30x30x3 矩阵并通过 10 个过滤器将生成一组 10 个 30x30x1 矩阵。 将这些贴图堆叠在一起后,们将得到一个 30x30x10 的矩阵。

这是我们卷积层的输出。

这一过程可以重复:CNN 通常具有多个卷积层。


3 层 CNN

CNN 的目标是减少图像,以便更容易处理,而不会丢失对准确预测有价值的特征。

卷积层、池化层和全连接层有三种层。

  • 卷积层负责识别像素中的特征。
  • 池化层负责使这些功能更加抽象。
  • 全连接层负责使用获取的特征进行预测。


卷积层


我们已经在上面描述了卷积层的工作原理。它们位于 CNN 的中心,使它们能够自主识别图像中的特征。

但是通过卷积过程会产生大量数据,这使得训练神经网络变得困难。要压缩数据,我们需要进行池化。


池化层


池化层从卷积层接收结果并将其压缩。池化层的滤波器始终小于特征映射。通常,它采用 2x2 正方形(图像块)并将其压缩为一个值。

2x2 滤波器会将每个特征图中的像素数减少到大小的四分之一。如果特征映射的大小为 10×10,输出映射将为 5×5。

可以使用多个不同的函数进行池化。这些是最常见的:

  • 最大池化。它计算特征图的每个图像块的最大值。
  • 平均池化。它计算特征图上每个图像块的平均值。

使用池化层后,您将获得池化特征图,它们是输入中检测到的特征的汇总版本。 池化层提高了 CNN 的稳定性:如果之前像素的最轻微波动都会导致模型错误分类,那么现在卷积层检测到的输入中特征位置的微小变化将导致特征在同一位置的池化特征图。

现在我们需要将输入展平(将其转换为列向量)并将其传递给常规神经网络进行分类。


全连接层


平坦化的输出被馈送到前馈神经网络,并且在训练的每次迭代中应用反向传播。 该层为模型提供了最终理解图像的能力:每个输入像素和每个输出类之间存在信息流。


卷积神经网络的优点


卷积神经网络有几个优点,使其可用于许多不同的应用。


特征学习


CNN 不需要手动特征工程:它们可以在训练过程中掌握相关特征。 即使您正在处理全新的任务,您也可以使用预先训练的 CNN,并通过向其提供数据来调整权重。 CNN 将根据新任务进行调整。


计算效率


由于卷积过程,CNN 的计算效率比常规神经网络高得多。 CNN 使用参数共享和降维,使得模型的部署变得简单快捷。 它们可以经过优化以在任何设备上运行,甚至在智能手机上。


高精度


目前最先进的图像分类神经网络不是卷积网络。 然而,在图像和视频识别以及类似任务的大多数情况和任务中,CNN 已经统治了很长一段时间。 它们通常比非卷积神经网络表现出更高的准确性,特别是当涉及大量数据时。


卷积神经网络的缺点


然而,CNN 并不完美。即使它看起来是一个非常聪明的工具,它仍然容易受到对抗性攻击。


对抗性攻击


对抗性攻击是向网络提供 “坏” 示例(即以特定方式略微修改图像)以导致错误分类的情况。即使是像素的轻微变化也会让 CNN 发疯。例如,犯罪分子可以欺骗基于 CNN 的人脸识别系统,并在镜头前通过而不被识别。


数据密集型训练


为了让 CNN 展示他们的神奇力量,他们需要大量的训练数据。这些数据不容易收集和预处理,这可能会成为更广泛采用该技术的障碍。这就是为什么即使在今天也只有少数好的预训练模型,如 GoogleNet,VGG,Inception,AlexNet。大多数由全球公司拥有。


卷积神经网络的用途是什么?


卷积神经网络用于许多行业。以下是它们在实际应用中使用的一些常见示例。


图像分类(Image classification)


卷积神经网络通常用于图像分类。通过识别有价值的特征,CNN 可以识别图像上的不同物体。这种能力使它们在医学上很有用,例如,用于 MRI 诊断。CNN 也可用于农业。这些网络从 LSAT 等卫星接收图像,并可以使用这些信息根据耕种水平对土地进行分类。因此,这些数据可用于预测场地的肥力水平或制定最佳利用农田的策略。手写数字识别也是 CNN 最早用于计算机视觉的应用之一。


物体检测(Object detection)


自动驾驶汽车、人工智能监控系统和智能家居经常使用 CNN 来识别和标记物体。 CNN 可以识别照片上的物体,并实时对其进行分类和标记。 这就是自动驾驶汽车如何绕过其他汽车和行人,以及智能家居如何识别户主的脸部。


视听匹配(Audio visual matching)

YouTube,Netflix 和其他视频流服务使用视听匹配来改进其平台。有时用户的请求可能非常具体,例如,“关于太空僵尸的电影”,但搜索引擎应该满足这种奇特的请求。

对象重建(Object reconstruction)

您可以使用 CNN 对数字空间中的真实对象进行 3D 建模。目前,有 CNN 模型仅基于一个图像创建 3D 面部模型。类似的技术可用于创建数字孪生,这在建筑、生物技术和制造业中很有用。

语音识别(Speech recognition)和自然语言处理(Natural Language Processing)等

尽管 CNN 经常用于处理图像,但它并不是它们唯一可能的用途。CNN 也可以帮助语音识别和自然语言处理。例如,Facebook 的语音识别技术基于卷积神经网络。


总结


总而言之,卷积神经网络是计算机视觉和类似领域的一个很棒的工具,因为它们能够识别原始数据中的特征。

他们可以识别训练数据中不同像素之间的联系,并使用这些信息自行设计特征,从低级(边缘、圆圈)到高级(面部、手部、汽车)构建。

问题是这些特征对人类来说可能变得相当难以理解。此外,图像中的野生像素有时会导致新的令人惊讶的结果。

希望本篇博客对你学习卷积神经网络有所帮助!如果觉得文章不错或能帮助到你学习,可以点赞👍收藏📁评论📒+关注哦😊😊😊!后续会持续更新机器学习相关内容。


相关文章
|
19天前
|
机器学习/深度学习 人工智能 算法
猫狗宠物识别系统Python+TensorFlow+人工智能+深度学习+卷积网络算法
宠物识别系统使用Python和TensorFlow搭建卷积神经网络,基于37种常见猫狗数据集训练高精度模型,并保存为h5格式。通过Django框架搭建Web平台,用户上传宠物图片即可识别其名称,提供便捷的宠物识别服务。
208 55
|
28天前
|
机器学习/深度学习 人工智能 算法
【宠物识别系统】Python+卷积神经网络算法+深度学习+人工智能+TensorFlow+图像识别
宠物识别系统,本系统使用Python作为主要开发语言,基于TensorFlow搭建卷积神经网络算法,并收集了37种常见的猫狗宠物种类数据集【'阿比西尼亚猫(Abyssinian)', '孟加拉猫(Bengal)', '暹罗猫(Birman)', '孟买猫(Bombay)', '英国短毛猫(British Shorthair)', '埃及猫(Egyptian Mau)', '缅因猫(Maine Coon)', '波斯猫(Persian)', '布偶猫(Ragdoll)', '俄罗斯蓝猫(Russian Blue)', '暹罗猫(Siamese)', '斯芬克斯猫(Sphynx)', '美国斗牛犬
155 29
【宠物识别系统】Python+卷积神经网络算法+深度学习+人工智能+TensorFlow+图像识别
|
1月前
|
机器学习/深度学习 资源调度 算法
图卷积网络入门:数学基础与架构设计
本文系统地阐述了图卷积网络的架构原理。通过简化数学表述并聚焦于矩阵运算的核心概念,详细解析了GCN的工作机制。
84 3
图卷积网络入门:数学基础与架构设计
|
28天前
|
机器学习/深度学习 人工智能 自然语言处理
深入理解深度学习中的卷积神经网络(CNN)##
在当今的人工智能领域,深度学习已成为推动技术革新的核心力量之一。其中,卷积神经网络(CNN)作为深度学习的一个重要分支,因其在图像和视频处理方面的卓越性能而备受关注。本文旨在深入探讨CNN的基本原理、结构及其在实际应用中的表现,为读者提供一个全面了解CNN的窗口。 ##
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
深度学习中的卷积神经网络(CNN): 从理论到实践
本文将深入浅出地介绍卷积神经网络(CNN)的工作原理,并带领读者通过一个简单的图像分类项目,实现从理论到代码的转变。我们将探索CNN如何识别和处理图像数据,并通过实例展示如何训练一个有效的CNN模型。无论你是深度学习领域的新手还是希望扩展你的技术栈,这篇文章都将为你提供宝贵的知识和技能。
288 7
|
2月前
|
机器学习/深度学习 自然语言处理 算法
深入理解深度学习中的卷积神经网络(CNN)
深入理解深度学习中的卷积神经网络(CNN)
55 1
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
探索深度学习中的卷积神经网络(CNN)及其在现代应用中的革新
探索深度学习中的卷积神经网络(CNN)及其在现代应用中的革新
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
深度学习中的卷积神经网络(CNN)及其在图像识别中的应用
本文旨在通过深入浅出的方式,为读者揭示卷积神经网络(CNN)的神秘面纱,并展示其在图像识别领域的实际应用。我们将从CNN的基本概念出发,逐步深入到网络结构、工作原理以及训练过程,最后通过一个实际的代码示例,带领读者体验CNN的强大功能。无论你是深度学习的初学者,还是希望进一步了解CNN的专业人士,这篇文章都将为你提供有价值的信息和启发。
|
2月前
|
机器学习/深度学习 人工智能 网络架构
深入理解深度学习中的卷积神经网络(CNN)
深入理解深度学习中的卷积神经网络(CNN)
55 1
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
深入理解深度学习中的卷积神经网络(CNN)
深入理解深度学习中的卷积神经网络(CNN)

热门文章

最新文章