一种神经元探索系统方法及装置

简介:

发明背景与现有技术
应用背景
深度学习已经在图像分类检测、游戏等诸多领域取得了突破性的成绩。由于人工神经网络计算量大,训练时间长。因此,相关的硬件加速平台也在百花齐放,包括基于英伟达的GPU、谷歌的TPU、以及FPGA实现的神经网络硬件平台。神经网络的结构复杂多样、计算量大的特点,给硬件设计带来了巨大挑战。
原有技术及问题 
(1)传统神经网络
基于传统的CPU完成运算,缺点是神经网路的神经元众多,由于单机的CPU个数限制,整个网络的并行计算性能不高。
(2)硬件加速神经网络
通常基于FPGA 等可编程芯片,这样的神经网络运算能力强,并行性好。但是这样的神经网络,其硬件实现的底层神经元缺乏自适应学习和演化能力。



本发明技术方案
神经网络互连模型
如右图,每一个方块表示一个神经元,以二维硬件模型(如FPGA)为例,每一个神经元连接着另外四个神经元。整个模型有三类输入输出:
(1)任意输入,每一个输入连接到一个神经元上;
(2)任意输出,每一个输出连接到一个神经元上;
(3)奖励反馈输入,连接到所有神经元上。
此外,两个相连神经元之间的连接为一个或多个浮点数(用以记忆神经网络参数)存储单元。
神经元,内部是一个多层神经网络的结构,带有自适应学习和演化能力
(1)多层神经网络有五个输入:分别表示四个连接存储单元的大小和一个奖励反馈信号的大小;
(2)多层神经网络有四个输出:四个连接存储单元的变化率;
(3)使用优化算法(如遗传算法、强化学习或者策略梯度)来优化神经网络的权重以最大化长时平均奖励(一段时间的平均奖励)
(4)优化的每一个迭代使用多种不同常用机器学习问题来进行训练。监督学习和无监督学习都需要提前转化为强化学习问题

 

本发明的技术保护点
本文提出神经元探索系统设计方法,包括神经网络互连模型,带有自适应学习和演化能力的神经元设计等



本发明有益效果
解决问题
1)神经元具备自适应学习和演化能力,可以构建结构复杂多样的神经网络。














本文转自张昺华-sky博客园博客,原文链接:http://www.cnblogs.com/bonelee/p/7728039.html,如需转载请自行联系原作者




相关文章
|
Rust 安全 编译器
Rust中的生命周期与借用检查器:内存安全的守护神
本文深入探讨了Rust编程语言中生命周期与借用检查器的概念及其工作原理。Rust通过这些机制,在编译时确保了内存安全,避免了数据竞争和悬挂指针等常见问题。我们将详细解释生命周期如何管理数据的存活期,以及借用检查器如何确保数据的独占或共享访问,从而在不牺牲性能的前提下,为开发者提供了强大的内存安全保障。
|
10月前
|
API 区块链
获取指定网页基础信息【TDK】免费API接口教程
该接口用于从标准网页中提取标题、关键词、描述和图标等信息。支持POST/GET请求,需提供用户ID、KEY及目标网址等参数,可选指定访问节点。返回状态码、信息提示及提取的内容。示例与详细文档见官网。
|
10月前
|
安全 程序员 编译器
【C语言】const 关键字详解
`const`关键字在C语言中用于定义常量,提供只读的变量。这意味着一旦初始化,`const`变量的值不能再被修改。下面详细介绍`const`关键字的用法、作用以及其在不同上下文中的应用。
604 2
|
5G 测试技术 语音技术
5G赋能沉浸式体验:VR/AR时代的网络基石
5G赋能沉浸式体验:VR/AR时代的网络基石
423 1
|
自然语言处理 API 数据处理
惊了!浏览器居然自带语音API和流处理API!
惊了!浏览器居然自带语音API和流处理API!
233 0
|
机器学习/深度学习 人工智能 自然语言处理
【大模型】比较和对比 LLM 架构
【5月更文挑战第6天】【大模型】比较和对比 LLM 架构
|
PHP
PHP获取当前脚本内存占用情况
PHP获取当前脚本内存占用情况
783 0
|
弹性计算 负载均衡 小程序
阿里云服务器免费申请入口
阿里云服务器免费申请入口 free.aliyun.com 阿里云个人用户和企业用户均可申请免费试用,最高可以免费使用3个小时,阿里云服务器网分享阿里云服务器免费试用申请入口链接及云服务器配置
1344 1
|
移动开发 JavaScript 前端开发
Video.js使用指南
Video.js使用指南
|
缓存 前端开发 API
短视频app开发,从后端视角分析完整开发流程
短视频app开发,从后端视角分析完整开发流程