Memcache技术精华

本文涉及的产品
RDS Agent(兼容OpenClaw),2核4GB
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS DuckDB + QuickBI 企业套餐,8核32GB + QuickBI 专业版
简介: 还在等什么,快来一起讨论关注吧,公众号【八点半技术站】,欢迎加入社群

基本介绍下memcache

它是一个一个高性能的分布式内存对象缓存系统。

端口号 11211

目前被许多网站使用以提升网站的访问速度,尤其对于一些大型的、

需要频繁访问数据库的网站访问速度提升效果十分显著

根据一个sql取出的数据,把sql取出的数据,给缓存到memcache里面,

当下次再操作该sql语句的时候,则直接从memcache里面获取


memcache客户端mc和服务器端ms可以单独安装在任何独立server上。

跟mysql比较一下

 

 它是一个c/s架构

mysql的数据是存在磁盘的 memcache存在内存里

mysql的数据存储是,由数据库,数据表,数据的记录,

存储数据是按照表的结构进行存储的。

memcache的数据存储格式是:key/value的格式,来存储的,

相当于在内存里面有一张两列的哈希表。类似于php的里面的关联数组



memcache细节讨论

 1、缓存周期(有效期)

缓存周期的设置有两种方式:

如果缓存周期设置为0表明此数据永不过期


第一种使用:秒数,最大不能超过30天,即2592000秒,

第二种使用:使用时间戳,该时间戳是到的哪个时间点。比如我们要把一个数据缓存60天,

$mem->add($key,$value,0,time()+60*24*3600)


2、 惰性删除,

就是说,缓存的数据,到期后,不会自动删除,当get数据的时候,查看有没有到期,如果到期了,则再删除该数据。

 memcache不会开启进程来监视键是否过期,省memcache的资源,也省cpu.


3、Least Recently Used(LRU)

最近 最少使用原则,

当前存储的数据的在memcache里面空间已经占满后,则memcache会把不活跃(get或set次数比较少的)的数据(不管是否到期)清除,让新的数据给存储进来。


4、安全性

memcache定位就是做数据的缓存的,不是数据的持久存储的,因此没有做一些用户的验证,目的提高连接速度,发挥自己的独特功能。

memcahe该软件本身没有提供一些安全机制,如果要限制使用,则只能在操作系统的层面来解决,比如window系统、安装防火墙的软件,在linux下面使用iptables,seclinux(安全机制)


5、memcache比较适合于存储哪些数据。

存储的数据的特点:

 访问比较频繁,

安全性不高,丢失无所谓,

修改比较频繁的数据,比如一些用户的在线状态。


6、不适合应用的场景:

 1、缓存的数据量比较小。

2、缓存的数据需要持久化。



memcache实现原理

1、访问数据的速度比传统的关系型数据库要快,因为Oracle、MySQL这些传统的关系型数据库为了保持数据的持久性,数据存放在硬盘中,IO操作速度慢


2、memcache的数据存放在内存中同时意味着只要memcache重启了,数据就会消失


3、既然memcache的数据存放在内存中,那么势必受到机器位数的限制,32位机器最多只能使用2GB的内存空间,要使用更多内存,可以分多个端口开启多个Memcached进程。

 64位机器可以认为没有上限。


4、memcache采用的内存分配方式是固定空间分配


1、memcache将内存空间分为一组slab


2、每个slab下又有若干个page,每个page默认是1M,如果一个slab占用100M内存的话,那么这个slab下应该有100个page


3、每个page里面包含一组chunk,chunk是真正存放数据的地方,同一个slab里面的chunk的大小是固定的


4、应该可以理解为什么memcache存放的value大小是限制的,因为一个新数据过来,slab会先以page为单位申请一块内存,申请的内存最多就只有1M,所以value大小自然不能大于1M了


5、memcache的内存分配chunk里面会有内存浪费,88字节的value分配在128字节(紧接着大的用)的chunk中,就损失了30字节,但是这也避免了管理内存碎片的问题


6、memcache的LRU算法不是针对全局的,是针对slab的






总结memcache的特性和限制



1、memcache中可以保存的item数据量是没有限制的,只要内存足够



2、memcache单进程在32位机中最大使用内存为2G,64位机则没有限制。



3、Key最大为250个字节,超过该长度无法存储



4、单个item最大数据是1MB,超过1MB的数据不予存储



5、memcache服务端是不安全的,比如已知某个memcache节点,可以直接telnet过去,并通过flush_all让已经存在的键值对立即失效//这个不太懂 抽时间实践



6、不能够遍历memcache中所有的item,因为这个操作的速度相对缓慢且会阻塞其他的操作



8、memcache设置添加某一个Key值的时候,传入expiry为0表示这个Key值永久有效,这个Key值也会在30天之后失效



数据在内存中失效后,并不会立马被删除,只有在下次get时候,系统才会将其删除。

memcache可以因此,被一些未被及时删除的数据占满空间。

加之LRU淘汰机制,永久数据如果很少被访问的话,在内存空间被占满的情况下,再有新数据被缓存,则永久数据,就有可能被删除





PHP的memcache客户端所有方法总结

memcache::add


添加一个值,如果已经存在,则返回false



memcache::addServer


添加一个可供使用的服务器地址



memcache::close


关闭一个memcache对象



memcache::connect


创建一个memcache对象


memcache::decrement


对保存的某个key中的值进行减法操作

 

memcache::delete


删除一个key值



memcache::flush


清除所有缓存的数据

实际上没有释放资源,它仅仅将所有的缓存标记为过期,这样可以使新的缓存来覆盖被占的内存空间。



memcache::get


获取一个key值



memcache::getServerStatus


获取运行服务器的参数

成功返回服务器状态,服务器没有启动会返回0,其他数字的时候表示服务器是启动状态的。



memcache::getStatus


返回服务器的一些运行统计信息

 

memcache::getVersion


返回运行的memcache的版本信息



memcache::increment


对保存的某个key中的值进行加法操作



memcache::pconnect


创建一个memcache的持久连接对象



memcache::replace


对一个已有的key进行覆写操作



memcache::set

添加一个值,如果已经存在,则覆写

 

Memcache是以守护进程方式运行于一个或多个服务中,随时会接收客户端的连接和操作。



Memcached是一种无阻塞的socket通信方式服务,基于libevent库,由于无阻塞通信,对内存读写速度非常之快

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
Linux Shell
在Linux中如何一次性运行多个命令?
在Linux中如何一次性运行多个命令?
1227 0
|
算法 调度
PV操作与前趋图题型
PV操作与前趋图题型
867 0
|
SQL NoSQL 关系型数据库
2024Mysql And Redis基础与进阶操作系列(5)作者——LJS[含MySQL DQL基本查询:select;简单、排序、分组、聚合、分组、分页等详解步骤及常见报错问题所对应的解决方法]
MySQL DQL基本查询:select;简单、排序、分组、聚合、分组、分页、INSERT INTO SELECT / FROM查询结合精例等详解步骤及常见报错问题所对应的解决方法
|
存储 监控 Linux
在Linux中,如何进行日志审计?
在Linux中,如何进行日志审计?
|
人工智能 小程序 Java
【工具】轻松解锁SQLite数据库,一窥微信聊天记录小秘密
本文介绍了一款名为PyWxDump的开源工具,它可以获取微信账户信息、解密SQLite数据库以查看和备份聊天记录。此工具适用于已登录电脑版微信的用户,通过GitHub下载后简单几步即可操作。适合对数据恢复感兴趣的开发者,但请注意合法合规使用并尊重隐私。
3814 2
【工具】轻松解锁SQLite数据库,一窥微信聊天记录小秘密
|
传感器 机器人
舵机内部结及工作原理浅析
舵机内部结及工作原理浅析
938 2
|
监控 算法 iOS开发
Xcode调试内存最新理解
【8月更文挑战第12天】在Xcode中进行内存调试对确保iOS应用的稳定性和性能至关重要。主要利用Instruments套件内的工具如Leaks检测内存泄漏,Allocations追踪内存分配详情,及Memory Graph Debugger提供直观的内存结构视图。Xcode还支持内存图视图以了解对象布局与引用,动态内存分析实现实时监控,及符号化调试信息帮助定位问题源代码。最佳实践包括遵循内存管理原则、定期调试、优化代码逻辑,以及学习优秀代码案例。通过这些技术和策略,开发者能有效管理和优化应用的内存使用。
985 0
|
数据库
仅当指定列列表,且SET IDENTITY_INSERT为ON时,才能对自增列赋值
仅当指定列列表,且SET IDENTITY_INSERT为ON时,才能对自增列赋值
4039 0
|
Ubuntu 应用服务中间件 Apache
百度搜索:蓝易云【Ubunt20.04安装Gramine教程。】
现在,你已经成功在Ubuntu 20.04上安装了Gramine,并创建了一个新的Gramine项目。你可以通过访问[http://localhost:5000](http://localhost:5000/)来查看运行的Gramine应用程序。请注意,在生产环境中,你可能需要配置额外的Web服务器(如Nginx或Apache)来处理Gramine应用程序的请求。
278 1
idea集成svn、安装目录、无svn.exe、(有图具有说服力)
idea集成svn、安装目录、无svn.exe、(有图具有说服力)
671 0
idea集成svn、安装目录、无svn.exe、(有图具有说服力)

热门文章

最新文章