一种神经元探索系统方法及装置

简介:

发明背景与现有技术
应用背景
深度学习已经在图像分类检测、游戏等诸多领域取得了突破性的成绩。由于人工神经网络计算量大,训练时间长。因此,相关的硬件加速平台也在百花齐放,包括基于英伟达的GPU、谷歌的TPU、以及FPGA实现的神经网络硬件平台。神经网络的结构复杂多样、计算量大的特点,给硬件设计带来了巨大挑战。
原有技术及问题 
(1)传统神经网络
基于传统的CPU完成运算,缺点是神经网路的神经元众多,由于单机的CPU个数限制,整个网络的并行计算性能不高。
(2)硬件加速神经网络
通常基于FPGA 等可编程芯片,这样的神经网络运算能力强,并行性好。但是这样的神经网络,其硬件实现的底层神经元缺乏自适应学习和演化能力。



本发明技术方案
神经网络互连模型
如右图,每一个方块表示一个神经元,以二维硬件模型(如FPGA)为例,每一个神经元连接着另外四个神经元。整个模型有三类输入输出:
(1)任意输入,每一个输入连接到一个神经元上;
(2)任意输出,每一个输出连接到一个神经元上;
(3)奖励反馈输入,连接到所有神经元上。
此外,两个相连神经元之间的连接为一个或多个浮点数(用以记忆神经网络参数)存储单元。
神经元,内部是一个多层神经网络的结构,带有自适应学习和演化能力
(1)多层神经网络有五个输入:分别表示四个连接存储单元的大小和一个奖励反馈信号的大小;
(2)多层神经网络有四个输出:四个连接存储单元的变化率;
(3)使用优化算法(如遗传算法、强化学习或者策略梯度)来优化神经网络的权重以最大化长时平均奖励(一段时间的平均奖励)
(4)优化的每一个迭代使用多种不同常用机器学习问题来进行训练。监督学习和无监督学习都需要提前转化为强化学习问题

 

本发明的技术保护点
本文提出神经元探索系统设计方法,包括神经网络互连模型,带有自适应学习和演化能力的神经元设计等



本发明有益效果
解决问题
1)神经元具备自适应学习和演化能力,可以构建结构复杂多样的神经网络。













本文转自张昺华-sky博客园博客,原文链接:http://www.cnblogs.com/bonelee/p/7728039.html,如需转载请自行联系原作者


相关文章
|
7月前
BJT放大电路的小信号模型分析法
BJT放大电路的小信号模型分析法是一种常用的分析方法,用于研究BJT放大电路在小信号条件下的放大特性。该方法基于线性化假设,将非线性的BJT放大电路近似为线性的小信号模型,以便进行分析和计算。
121 0
|
7月前
BOSHIDA 两类常见的模拟电源与数字电源
随着科技的不断发展,电源的种类也越来越丰富。在电源的分类中,模拟电源和数字电源是两类常见的电源类型。不同类型的电源具有不同的特点和应用范围。本文将介绍模拟电源和数字电源之间的区别。
BOSHIDA 两类常见的模拟电源与数字电源
|
7月前
互感与理想变压器
互感是指两个或多个线圈之间通过磁场相互作用而产生的电感。当一个线圈中的电流变化时,它会产生一个变化的磁场,这个磁场会穿过相邻的线圈,从而在相邻的线圈中产生感应电动势,这个现象就是互感。
75 0
|
10月前
数电模电(一) 逻辑门及其应用 实验
数电模电(一) 逻辑门及其应用 实验
|
8月前
电路电子技术2电容电感伏安关系 & 计算电路中某两端电压
电路电子技术2电容电感伏安关系 & 计算电路中某两端电压
50 0
|
9月前
|
传感器
【湍流介质的三维传播模拟器】全衍射3-D传播模拟器,用于在具有随机和背景结构的介质中传播无线电和光传播(Matlab代码实现)
【湍流介质的三维传播模拟器】全衍射3-D传播模拟器,用于在具有随机和背景结构的介质中传播无线电和光传播(Matlab代码实现)
【弱电综合课程设计】三菱PLC经步进驱动器控制步进电机调速和正反转(硬件连接+梯形图)
【弱电综合课程设计】三菱PLC经步进驱动器控制步进电机调速和正反转(硬件连接+梯形图)
【弱电综合课程设计】三菱PLC经步进驱动器控制步进电机调速和正反转(硬件连接+梯形图)
|
存储 传感器 算法
光学雨量计接线定义
IFR02 是通过红外光扫描原理非接触式检测降雨量的传感器(光学雨量计)。使用独特的智能学习适应算法, 可在复杂光环境中使用,具有很强的抗外部干扰能力。采用渐变脉宽调制与动态比例校正技术有利保障数据稳定性与材料老化导光性能下降的不利影响。内建 4 种雨型,可识别冲刷型、密集型、离散型、附着型降雨并分别处理。具备结露测量功能、 数据存储功能,自动记录降雨总量。光耦隔离脉冲信号输出兼容翻斗雨量计、 RS232 或者 RS485 接口方便信息化集成。多年底层技术、降雨模型积累,持续的改进升级,保障用户产品同步提升。
光学雨量计接线定义
|
传感器 存储 监控
YAMATAKE EST0240Z05WBX00 将环境能量转换成电能的能量收集
YAMATAKE EST0240Z05WBX00 将环境能量转换成电能的能量收集
91 0
YAMATAKE EST0240Z05WBX00 将环境能量转换成电能的能量收集
|
存储 编解码 测试技术
【硬件篇之电源纹波噪声测试】
【硬件篇之电源纹波噪声测试】
598 1
【硬件篇之电源纹波噪声测试】