从零开始,搭建一个自己的神经网络

简介: 从零开始,搭建一个自己的神经网络

还记得我们上次讲到识别图片的神经网络吗?上次我们借助TensorFlow来完成了对图片的识别,对神经网络的工作原理也有所了解了,那么我们今天来尝试一下,从零开始,自己搭建一个简单的神经网络如何?


ok,如果你的回答是"好",那我们就继续往下看,如果你的回答是"不好",那我们今天到这里就结束了。



回答"好"的同学,那我们就开始往下看了:


首先我们要明确我们要做什么:

从零搭建一个神经网络我们需要四个步骤:

1、定义网络的结构,包含输入,输出,隐藏层

2、初始化模型的参数

3、正向传播(计算损失值)

4、反向传播(对权值进行更新)

(3、4两步是不停的重复去做的)


ok,那我们开始了!


在这里,我们需要用到numpy进行数据运算:

pip install numpy

安装完毕之后,我们就开始定义我们的激活函数了,这里我们定义一个简单的SIGMOD函数:


640.png


在定义好激活函数之后,下面我们需要来定义网络结构,可爱的numpy早就为我们准备好了自带是网络结构,也就是二维矩阵,我们可以简单的对数据进行定义。通过numpy的array方法创建一个二维矩阵,也就是我们的网络结构:

640.png

输出:


640.png

下面,我们来对模型参数进行初始化:两个参数w,b(权值和偏置项)


640.png

初始化完成之后我们就要完成正向传播和反向传播了,对于正向传播,我们用来计算预测的值,而反向传播则是根据预测值和实际值之间的误差来不断更新w和b的一个过程。


首先,我们来定义正向传播:

640.jpg

返回梯度grads和损失cost,在计算结束后有必要断言一下数据类型,防止数据出问题。


下面我们来定义一个反向传播,来更新权值和偏置项:

将之前定义的正向传播函数放进去执行迭代操作,计算每一步的当前损失和梯度,利用梯度下降法对权值进行更新

640.jpg

到这里整个模型就搭建完啦!


最后,当我们简单的预测模型搭建完毕之后,我们再把对应的预测函数写一下,这样前前后后就算大功告成了!


640.png

到现在为止,我们的一个简单的神经网络模型和预测函数就全部写完了,怎么样,是不是很简单?


你也动手来试试吧!


代码地址:

https://www.bytelang.com/o/s/c/34DtxAiWGjs=

相关文章
|
机器学习/深度学习 算法 Serverless
大模型开发:描述损失函数的作用以及一些常见的损失函数。
损失函数在机器学习中至关重要,用于衡量预测误差、优化模型、评估性能及选择模型。常见类型包括均方误差(MSE)、均方根误差(RMSE)、交叉熵损失(适用于分类)、绝对误差(MAE)、hinge损失(SVMs)、0-1损失、对数似然损失和Focal Loss(应对类别不平衡)。选择时要考虑模型性质、数据特征和优化需求。
1093 3
|
传感器 编解码 数据处理
毕业设计|基于STM32单片机的水位浑浊度检测设计
毕业设计|基于STM32单片机的水位浑浊度检测设计
1434 0
|
机器学习/深度学习 人工智能 安全
隐私计算FATE-核心概念与单机部署
隐私计算与传统数据使用方式相比,它不需要聚合各方数据搭建数据仓库,联邦学习在联合的过程中,多方机构之间的数据是不会进行共享的,实现数据的可用不可见;本文主要分享隐私计算平台Fate的相关基本概念,以及基于Docker的单机部署。
1042 0
隐私计算FATE-核心概念与单机部署
|
算法 5G
|
11月前
|
存储 数据处理 Python
Python科学计算:NumPy与SciPy的高效数据处理与分析
【10月更文挑战第27天】在科学计算和数据分析领域,Python凭借简洁的语法和强大的库支持广受欢迎。NumPy和SciPy作为Python科学计算的两大基石,提供了高效的数据处理和分析工具。NumPy的核心功能是N维数组对象(ndarray),支持高效的大型数据集操作;SciPy则在此基础上提供了线性代数、信号处理、优化和统计分析等多种科学计算工具。结合使用NumPy和SciPy,可以显著提升数据处理和分析的效率,使Python成为科学计算和数据分析的首选语言。
249 3
IDEA创建Java9模块没有module-info.java的解决办法
IDEA创建Java9模块没有module-info.java的解决办法
974 0
IDEA创建Java9模块没有module-info.java的解决办法
|
数据挖掘 Python
Scipy 高级教程——统计学
Scipy 高级教程——统计学【1月更文挑战第11篇】
306 4
Scipy 高级教程——统计学
|
网络协议 Unix
EOF到底是什么意思?
我们在使用C标准I/O时,经常会看到EOF这个概念,这里需要明确的是并不存在EOF这样一个字符,它只是一个控制条件。起初,我认为EOF就是字面意思即,到达了文件的结尾(End of File)。
1476 1
|
数据采集 传感器 监控
目前比较好用的LabVIEW架构及其选择
目前比较好用的LabVIEW架构及其选择
448 0
|
数据库
mysql-SQL从一个表查询数据插入/更新到另一个表
mysql-SQL从一个表查询数据插入/更新到另一个表
192 0