常用的软件技术思想-池化技术等

简介:

池化技术

实际案例
今天去公司食堂吃早点,排了一队人,先是包子馒头,然后是韭菜盒子,各种饼,最后是喝的,比如小米粥,黑米粥,豆浆等,
发现队伍阻塞在最后那一段(小米粥,黑米粥,豆浆)了,这个说要黑米粥,阿姨忙不迭地去打黑米粥,那个说要小米粥,阿姨赶紧去打小米粥。。。
阿姨已经没有功夫来决定打哪个了。
那么我们看看另外一种情况,阿姨提前做好囤货的工作,比如小米粥,黑米粥,豆浆各打10碗放着,谁要谁自己拿。阿姨的工作就不用围着顾客团团转了,而是看哪个少了,就打哪个,比如发现黑米粥还剩下3碗了,那么就多打黑米粥。

简单来说就是提前保存大量的资源,以备不时之需

核心是复用

池化技术作用

  1. 复用相同的资源,减少浪费,减少新建和销毁的成本;
  2. 减少单独管理的成本,统一交由"池";
  3. 集中管理,减少"碎片";
  4. 提高系统响应速度,因为池中有现成的资源,不用重新去创建;

使用池化技术的例子

java线程池

java中所有的池化技术都有一个好处,就是通过复用池中的对象,降低系统资源消耗。设想一下如果我们有n多个子任务需要执行,如果我们为每个子任务都创建一个执行线程,而创建线程的过程是需要一定的系统消耗的,最后肯定会拖慢整个系统的处理速度。而通过线程池我们可以做到复用线程,任务有多个,但执行任务的线程可以通过线程池来复用,这样减少了创建线程的开销,系统资源利用率得到了提升!

通俗一点,线程池,就是提前创建 n 个线程在池中等待执行,当有任务过来时,直接从池中捞一个线程负责执行这个任务,执行完成之后,再放回池中,等待执行新的任务。
池中的线程可以多次利用,提高了资源利用率。
因为会预制 n 个线程,所以提高了响应速度。

数据库连接池

数据库连接池基本的思想是在系统初始化的时候,将数据库连接作为对象存储在内存中,当用户需要访问数据库时,并非建立一个新的连接,而是从连接池中取出一个已建立的空闲连接对象。使用完毕后,用户也并非将连接关闭,而是将连接放回连接池中,以供下一个请求访问使用。而连接的建立、断开都由连接池自身来管理。同时,还可以通过设置连接池的参数来控制连接池中的初始连接数、连接的上下限数以及每个连接的最大使用次数、最大空闲时间等等,也可以通过其自身的管理机制来监视数据库连接的数量、使用情况等

java 内存池

如果每次需要内存时都是重新申请,会产生很多内存碎片,影响内存的利用率。
如果一开始就申请一大块内存,按需使用,那么就会减少内存碎片。

计算系统池化技术

不同类型资源之间也存在生命周期不同步的问题。譬如,CPU 是发展速度最快的,每两三年就性能翻倍,然而存储的技术发展相对缓慢,从而会造成CPU性能和功耗的浪费。  服务器资源池化技术,除了能够带来灵活、弹性的资源部署,提高资源利用率这个优势,还能够更有效的提高服务器的故障修复能力,提升服务器运营效率。硬盘是故障率最高的部件之一,在实现存储池化技术后,多盘存储资源池为单体硬盘提供了很好的冗余设计能力。当单个硬盘出现故障后,可以及时使用其他硬盘资源进行无损恢复,无需立即现场更换硬盘

2019-03-09_15-31-46.jpg

虚拟化技术

虚拟化技术和云服务都是基于虚拟化技术,将单个服务器硬件虚拟成多个虚拟机VM,其目的也是在于提高服务器资源的利用率

2019-03-09_15-37-06.jpg

事件驱动开发

Event loop /Event driven development
我们想象现实生活中的例子,
以前去肯德基买吃的,需要排很长的队,排队的时候你只能干等着,啥也不能干。
比如你不能去上洗手间,你不能去买汽车票,你甚至不能确定你想买的东西还有没有。

现在像肯德基这种地方都安装了自动下单的物理设备,你可以自己下单买什么,然后去干别的事情。
快到你的时候,你的手机会收到提醒,然后你就直接去取餐了。

这两个场景最大的区别是什么?
前者是主动的,
后者是被动的,你会收到提醒。后者就是事件驱动的。

例子-支付成功回调

比如我们网上购物,支付订单时会跳转到第三方支付系统(比如支付宝),支付成功之后,
支付成功之后,第三方支付系统(比如支付宝)会给业务系统发送消息通知,业务系统受到通知之后,就会进行处理,比如修改订单状态,发出发货提醒等。

比如我们去食堂吃饭,如果刷工卡,刷卡成功之后,工作人员会及时从刷卡设备看到通知,就知道支付成功了,就不用找我们确认了。-- 事件驱动
如果使用手机去支付,工作人员会过一会问你下有没有支付成功,还要看你的手机界面。-- 轮询

java swing

在 java swing 中,每个界面元素(按钮,下拉框,输入框),都会绑定一个回调事件,当用户事件(例如单击,输入)发生时,系统会自动调用绑定的回调事件。
2019-03-14_08-57-53.jpg

设计态(开发态)-->用户态-->自治

现在有一种趋势:很多以前需要专业人员来操作的东西,现在普通人也可以操作。
比如20年前,一个内容发布系统里面的文章是需要网页编程人员来发布的,可能还需要编写 HTML,调样式,
但是现在我们不用会编程,也可以随便发表博客,比如在 简书,知乎 上发表文章。

很多公司,特别是大公司,致力于把软件开发过程中的某个环节,由开发态转化为用户态。
比如公司团队开发了通过拖拽(不用编写代码)就可以生成 HTML 页面的平台,这样非网页开发人员(比如后端)就可以自己开发网页了。

再比如Google blocky,全程用户态。

生成源代码的步骤

2019-03-03_18-00-23.jpg
其中"编译",类似于我们大学课程中的编译原理。
"代码自动优化":对生成的代码进行优化,比如把
if ((amout == 100)) 优化为 if (amout == 100) ,当然也有其他更复杂的优化。

模仿 Blockly 的代码生成

Google Blockly 是一款基于Web的、开源的、可视化程序编辑器。你可以通过拖拽块的形式快速构建程序,而这些所拖拽的每个块就是组成程序的基本单元。可视化编程完成,Blockly 直接支持 JavaScript、Python、PHP、Lua、Dart 语言源码的导出。此外,还可以将 Blockly 编辑器快速集成到Web、Android或iOS环境中。
2019-03-03_15-15-16.jpg
下面是参考Blockly 的 java 项目

界面操作(动画)
visaul_program_blocky.gif
最终界面
2019-03-03_17-45-32.jpg

保存生成的 json 格式
json_generate_code.jpg

解析
2019-03-03_15-28-55.jpg

生成的代码
2019-03-03_17-48-05.jpg

代码生成工具
2019-03-03_17-53-34.jpg

对应的界面元素
2019-03-03_13-14-37.jpg

说明

代码生成的过程远比上述过程复杂,比如涉及到编译原理,抽象语法树 AST,代码优化等

参考

https://github.com/google/blockly/wiki

https://developers.google.com/blockly/guides/overview

https://developers.google.com/blockly/

相关文章
|
数据采集 存储 人工智能
TripoSR开源!从单个图像快速生成 3D 对象!(附魔搭社区推理实战教程)
近期,VAST团队和Stability AI团队合作发布了TripoSR,可在一秒内从单个图像生成高质量3D对象。
|
人工智能 自然语言处理 机器人
AI心语:智能时代的情感纽带
本文旨在探索人工智能在情感计算领域的应用,以及这些技术如何帮助我们更好地理解和模拟人类情感。通过分析当前的技术进展和面临的伦理挑战,文章为读者提供了一个关于AI与情感结合世界的全面视角。
1721 7
|
网络安全
winSCP上传报错无权访问。 错误码:3 服务器返回的错误消息:Permission denied
【10月更文挑战第3天】winSCP上传报错无权访问。 错误码:3 服务器返回的错误消息:Permission denied
2721 1
|
存储 缓存 NoSQL
Redis 7.0如何优化缓存命中率?
优化Redis缓存命中率的关键策略包括:合理设计键值结构以节省内存并提高查找效率,如使用哈希表存储共享前缀的键;采用LRU算法淘汰不常用键,保持热门数据;优化查询模式,避免大键与大量小键,使用`SCAN`代替`KEYS`减少负载;为临时数据设置过期时间自动清理;监控性能并适时调整策略;利用不同数据类型的优势;使用Pipeline减少网络延迟;限制键扫描范围;优化Lua脚本执行效率;以及根据应用场景合理配置Redis参数。这些方法有助于提升Redis性能和缓存效率。
526 1
|
SQL 安全 Oracle
SQL Server 链接服务器(Linked Servers)
【9月更文挑战第12天】SQL Server 的链接服务器功能强大,可让你在一个实例中访问其他数据源,包括其他 SQL Server 实例、Oracle 数据库等。它支持数据集成、分布式查询和数据同步,无需复制数据。创建链接服务器需在 SQL Server Management Studio 中进行,并配置名称、类型及安全性。使用时需注意权限、性能和安全性问题,确保系统稳定和数据安全。
1003 0
|
Java
小程序中base64解码/编码
很多人都在为小程序如何实现base64编码/解码困扰,于是我参考前端大佬们对JavaScript中实现base64的文章进行了改写。简单实现了一个。。希望能帮助到小程序开发一线的大家吧、 不多说直接上代码: /** * UTF16和UTF8转换对照表 * U+00000000 – U+000000...
5355 13
|
SQL 数据处理 数据库
|
easyexcel Java
史上最全的Excel导入导出之easyexcel
史上最全的Excel导入导出之easyexcel
2418 1
史上最全的Excel导入导出之easyexcel
|
机器学习/深度学习 算法 自动驾驶
实战教程 | 车道线检测项目实战,霍夫变换 & 新方法 Spatial CNN
在某些情况下,直接调用已经搭好的模型可能是非常方便且有效的,比如Caffe、TensorFlow工具箱,但这些工具箱需要的硬件资源比较多,不利于初学者实践和理解。因此,为了更好的理解并掌握相关知识,最好是能够自己编程实践下。本文将展示计算机时如何识别车道线的。
实战教程 | 车道线检测项目实战,霍夫变换 & 新方法 Spatial CNN
|
开发工具 git
Flowable 源码目录结构
下载地址:flowable/flowable-engine at flowable-6.7.2 (github.com)
719 0

热门文章

最新文章