深度之眼(二)——矩阵及其基本运算

简介: 深度之眼(二)——矩阵及其基本运算

一、矩阵的基本概念及意义以及常见的特殊矩阵


0a2653c851af460fa595bd959398a8f1.png


矩阵的意义又是什么,下面举一种线性变换

2d65d23f6d4748949b924e4057485923.png

分清楚:零矩阵、单位矩阵和对角矩阵的区别


二、矩阵的加法减法数乘以及性质


0a2653c851af460fa595bd959398a8f1.png


三、矩阵的乘法以及性质


0a2653c851af460fa595bd959398a8f1.png

注意点:矩阵的相乘,必须保证第一行的列数等于第二行的行数

如:第一个矩阵A为m×s,第二个矩阵B则为s×n,得到矩阵C的则是m×n,C = AB

而cij则表示A矩阵的行乘以B矩阵的列


重点:矩阵的乘法不满足交换律


四、矩阵运算在深度学习中的应用(初级)


4.1 数字图片识别(神经网络)


2e9b90b2ca334476abebe75bafe6eeaa.png


一张图片有0 - 9其中一个数字,大小为10×10,相当于100个数字


1.展开成100个向量(1 * 100)

2.将(1100)的矩阵乘以w1(100512),编程(1*512)的一个扩展出来的矩阵

3.对(1*512)经过relu函数处理

0a2653c851af460fa595bd959398a8f1.png

4.将relu处理过后(1512)乘以w2(51210)生成(1*10)[因为想生成10个数]

5.经过softmax(后面会讲)处理,生成S1…S10的一个概率分布

经过w1和w2的处理体现出一种特征空间的变换


以上是单个样本的,如果有多张图片,则矩阵如下


2d65d23f6d4748949b924e4057485923.png


五、矩阵的迹,矩阵的转置,对称矩阵(协方差矩阵)


5.1 矩阵的迹


0a2653c851af460fa595bd959398a8f1.png

两个矩阵的交换后相乘不相等,但是迹是一样的

证明:

2d65d23f6d4748949b924e4057485923.png


5.2 矩阵的转置


0a2653c851af460fa595bd959398a8f1.png

aijT=aji


5.3 对称矩阵


2d65d23f6d4748949b924e4057485923.png

对称阵的特点是:它的元素以对角线为对称轴对应相等很显然单位矩阵以及对角矩阵都为对称矩阵

2e9b90b2ca334476abebe75bafe6eeaa.png


协方差矩阵

协方差矩阵是对称阵0a2653c851af460fa595bd959398a8f1.png

相关文章
|
7月前
|
调度
乘积线性化问题探析
乘积线性化问题探析
|
机器学习/深度学习 决策智能
矩阵分析 (八) 矩阵的直积
矩阵分析 (八) 矩阵的直积
523 0
|
机器学习/深度学习 决策智能
矩阵分析 (六) 矩阵的函数
矩阵分析 (六) 矩阵的函数
138 0
|
机器学习/深度学习 传感器 算法
基于有限差分法和追赶法解对角矩阵解二维热传导问题附matlab代码
基于有限差分法和追赶法解对角矩阵解二维热传导问题附matlab代码
|
机器学习/深度学习
深度之眼(三)——矩阵的行列式
深度之眼(三)——矩阵的行列式
244 0
深度之眼(三)——矩阵的行列式
深度之眼(十)——矩阵特征值与特征向量
深度之眼(十)——矩阵特征值与特征向量
265 0
深度之眼(十)——矩阵特征值与特征向量
|
机器学习/深度学习 算法
深度之眼(七)——矩阵的初等变换(附:数模一些模型的解释)
深度之眼(七)——矩阵的初等变换(附:数模一些模型的解释)
152 0
深度之眼(七)——矩阵的初等变换(附:数模一些模型的解释)
|
机器学习/深度学习
深度之眼(十八)——偏导数与矩阵的求导
深度之眼(十八)——偏导数与矩阵的求导
284 0
深度之眼(十八)——偏导数与矩阵的求导
|
机器学习/深度学习 算法
深度之眼(六)——矩阵的逆(附:logistic模型一些想法)
深度之眼(六)——矩阵的逆(附:logistic模型一些想法)
100 0
深度之眼(六)——矩阵的逆(附:logistic模型一些想法)
|
机器学习/深度学习 算法
深度之眼(十二)——svd分解的应用
深度之眼(十二)——svd分解的应用
深度之眼(十二)——svd分解的应用