Redis布隆过滤器插件安装及使用

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: Redis布隆过滤器插件安装及使用

1.原理



网络异常,图片无法展示
|


上图的key1、key2分别计算hash三次会分布到三个键为上
是对数据进行多次hash运算然后根据长度取模,分散到多个位置上:
如果分散的位置都为1则说明数据存在
如果分散的位置上有0则说明数据不存在。
复制代码


2.说明



当在布隆过滤器上当某个值是存在的时候,则这个值可能不存在;但是当某个值不存在,则这个值一定不存在
有一定的误差,但是可以接受
复制代码


布隆过滤器在匹配的速度非常快占用内存也小
有一定的误判率,比如:当声明的空间长度/数据量的长度过小的化误判率会升高的
                     还有hash计算的次数不同也有差别小的时候误判也是会提升的
复制代码


布隆计算器


3.应用



例如爬虫需要去重已经爬取过的链接,怎么办?
数据库保存已经爬取过的链接,这些链接保存在那里?随着时间的推移数据量变得越来越多效率如何处理?
缓存穿透:当有些恶意的链接后台数据不不存在,这时候查询数据缓存没命中而去访问了数据库,当量大的时候后台数据库会撑不住的,这时候对于不存在的数据可以直接丢弃。存在的数据走缓存。那就是说存在的数据也会放在布隆过滤器的
复制代码


4.安装



4.1.地址


https://github.com/RedisBloom/RedisBloom
wget https://codeload.github.com/RedisBloom/RedisBloom/tar.gz/refs/tags/v2.2.9
复制代码


4.2.解压


tar -xzvf RedisBloom-2.2.9.tar.gz
复制代码


4.3.编译


切换目录
make
会生成文件:redisbloom.so
复制代码


4.4.redis配置文件修改


网络异常,图片无法展示
|


4.5.启动


如果启动的时候,配置文件没生效 需要指定配置文件
redis-server /etc/redis/redis.conf
或者
redis-server --loadmodule /etc/redis/RedisBloom-2.2.9/redisbloom.so &
复制代码


4.6指令效果


网络异常,图片无法展示
|

相关文章
|
4月前
|
关系型数据库 应用服务中间件 nginx
Docker一键安装中间件(RocketMq、Nginx、MySql、Minio、Jenkins、Redis)
本系列脚本提供RocketMQ、Nginx、MySQL、MinIO、Jenkins和Redis的Docker一键安装与配置方案,适用于快速部署微服务基础环境。
|
1月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
297 5
|
7月前
|
NoSQL 数据可视化 关系型数据库
安装 Redis
本文主要介绍了Linux系统下Redis的安装步骤,包括卸载旧版本、下载新版本、编译安装以及配置启动等详细操作,并解释了Redis默认端口6379的由来。同时,文章还简要说明了Windows环境下Redis的下载与服务安装方法。最后,推荐了几款Redis可视化管理工具,如RedisView、QuickRedis、AnotherRedisDesktopManager和RedisPlus,提供了它们的功能特点及下载链接,方便用户根据需求选择合适的工具进行数据库管理。
530 1
|
6月前
|
消息中间件 NoSQL Linux
Redis的基本介绍和安装方式(包括Linux和Windows版本),以及常用命令的演示
Redis(Remote Dictionary Server)是一个高性能的开源键值存储数据库。它支持字符串、列表、散列、集合等多种数据类型,具有持久化、发布/订阅等高级功能。由于其出色的性能和广泛的使用场景,Redis在应用程序中常作为高速缓存、消息队列等用途。
911 16
|
6月前
|
JSON NoSQL Redis
在Rocky9系统上安装并使用redis-dump和redis-load命令的指南
以上步骤是在Rocky9上使用redis-dump和redis-load命令顺利出行的秘籍。如果在实行的过程中,发现了新的冒险和挑战,那么就像一个勇敢的航海家,本着探索未知的决心,解决问题并前进。
222 14
|
8月前
|
NoSQL Ubuntu 网络安全
在 Ubuntu 20.04 上安装和配置 Redis
在 Ubuntu 20.04 上安装和配置 Redis 的步骤如下:首先更新系统包,然后通过 `apt` 安装 Redis。安装后,启用并启动 Redis 服务,检查其运行状态。可选配置包括修改绑定 IP、端口等,并确保防火墙设置允许外部访问。最后,使用 `redis-cli` 测试 Redis 功能,如设置和获取键值对。
351 1
|
8月前
|
NoSQL Java Redis
微服务——SpringBoot使用归纳——Spring Boot 中集成Redis——Redis 安装
本教程介绍在 VMware 虚拟机(CentOS 7)或阿里云服务器中安装 Redis 的过程,包括安装 gcc 编译环境、下载 Redis(官网或 wget)、解压安装、修改配置文件(如 bind、daemonize、requirepass 等设置)、启动 Redis 服务及测试客户端连接。通过 set 和 get 命令验证安装是否成功。适用于初学者快速上手 Redis 部署。
217 0
|
11月前
|
NoSQL 关系型数据库 Redis
《docker高级篇(大厂进阶):1.Docker复杂安装详说》包括:安装mysql主从复制、安装redis集群
《docker高级篇(大厂进阶):1.Docker复杂安装详说》包括:安装mysql主从复制、安装redis集群
305 14
|
10月前
|
关系型数据库 MySQL 应用服务中间件
《docker基础篇:8.Docker常规安装简介》包括:docker常规安装总体步骤、安装tomcat、安装mysql、安装redis
《docker基础篇:8.Docker常规安装简介》包括:docker常规安装总体步骤、安装tomcat、安装mysql、安装redis
349 7
|
11月前
|
NoSQL 关系型数据库 MySQL
Linux安装jdk、mysql、redis
Linux安装jdk、mysql、redis
577 7