大数据-43 Redis 功能扩展 Lua 脚本 对Redis扩展 eval redis.call redis.pcall

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 大数据-43 Redis 功能扩展 Lua 脚本 对Redis扩展 eval redis.call redis.pcall

点一下关注吧!!!非常感谢!!持续更新!!!

目前已经更新到了:

Hadoop(已更完)

HDFS(已更完)

MapReduce(已更完)

Hive(已更完)

Flume(已更完)

Sqoop(已更完)

Zookeeper(已更完)

HBase(已更完)

Redis (正在更新…)

章节内容

上一节我们完成了如下的内容:


Redis功能扩展

Redis发布/订阅模式

Redis 事务相关

Redis 为什么是弱事务

等等

背景介绍

这里是三台公网云服务器,每台 2C4G,搭建一个大数据的学习环境,供我学习。

之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。


2C4G 编号 h121

2C4G 编号 h122

2C2G 编号 h123

Lua 介绍

简介一下

Lua是一个轻量小巧的脚本语言,用标准的C语言编写并且开源。

应用场景有:

  • 游戏开发
  • 独立应用脚本
  • Web应用脚本
  • 数据库插件

下载安装

# 下载页面
http://www.lua.org/download.html
# 下载地址
https://www.lua.org/ftp/lua-5.4.7.tar.gz

EVAL

EVAL script numkeys key [key ...] arg [arg ...]

上述参数说明:


script:一段Lua脚本程序,它会被运行在Redis服务器的上下文中

numkeys:用于指定键名参数的个数

key:从eval的第三个参数开始算起,使用了numkeys个键,表示在脚本中所用到的那些Redis键。

arg:可以在Lua中通过全局变量ARGV数组访问,访问的形式和KEYS变量类似 ARGV[1]、ARGV[2]等

我们可以通过这样的方式来调用它:

eval "return {KEYS[1],KEYS[2],ARGV[1],ARGV[2]}" 2 key1 key2 first second

redis.call

返回值就是Redis命令执行的返回值

如果出错,会返回出错信息,不继续执行

redis.pcall

返回值就是Redis命令执行的返回值

如果出错,会记录错误信息,继续执行

EVALSHA

eval命令要求你在每次执行脚本的时候都发送一次脚本主体(Script Body)


Redis有一个内部缓存机制,因此它不会每次都重新编译脚本。为了减少贷款消耗,Redis实现了 EVALSHA,它接收的第一个参数不是脚本,而是脚本的 SHA1校验。


Script命令

Script Flush 清除所有脚本缓存

Script Exists 根据给定的脚本校验和,检查指定脚本是否存在于缓存脚本中

Script Load 将一个脚本装入脚本缓存 返回SHA1摘要 但并不立即运行

Script Kill 杀死当前正在运行的脚本

脚本测试1

编写一个脚本

vim /opt/wzk/test01.lua

写入如下内容

return redis.call('set',KEYS[1],ARGV[1])

保存后,执行Shell命令

./redis-cli --eval /opt/wzk/test01.lua name , kangkang

脚本测试2

编写脚本

vim /opt/wzk/test02.lua

写入如下内容

local key=KEYS[1]
local list=redis.call("lrange",key,0,-1);
return list;

保存后,执行Shell命令

./redis-cli --eval /opt/wzk/test02.lua list

执行的结果如下图:

案例1:原子计数器

脚本将实现将键的值+1,然后返回更新的值:

local key = KEYS[1]
local increment = tonumber(ARGV[1])

local current = tonumber(redis.call('GET', key) or 0)
local new_value = current + increment
redis.call('SET', key, new_value)

return new_value

案例2:检查并设置值

如果键的值等于给定的旧值,则将其设置为新值

local key = KEYS[1]
local old_value = ARGV[1]
local new_value = ARGV[2]

if redis.call('GET', key) == old_value then
    redis.call('SET', key, new_value)
    return 1
else
    return 0
end

案例3:列表的批量插入

local key = KEYS[1]
local elements = {}

for i = 1, #ARGV do
    table.insert(elements, ARGV[i])
end

redis.call('LPUSH', key, unpack(elements))
return redis.call('LRANGE', key, 0, -1)

案例3:获取并删除键值对

local key = KEYS[1]
local value = redis.call('GET', key)

if value then
    redis.call('DEL', key)
end

return value

案例4:哈希表字段的批量设置

local key = KEYS[1]

for i = 1, #ARGV, 2 do
    redis.call('HSET', key, ARGV[i], ARGV[i+1])
end

return redis.call('HGETALL', key)


相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
3月前
|
存储 分布式计算 大数据
MaxCompute聚簇优化推荐功能发布,单日节省2PB Shuffle、7000+CU!
MaxCompute全新推出了聚簇优化推荐功能。该功能基于 31 天历史运行数据,每日自动输出全局最优 Hash Cluster Key,对于10 GB以上的大型Shuffle场景,这一功能将直接带来显著的成本优化。
213 3
|
3月前
|
机器学习/深度学习 算法 Java
Java 大视界 -- Java 大数据机器学习模型在生物信息学基因功能预测中的优化与应用(223)
本文探讨了Java大数据与机器学习模型在生物信息学中基因功能预测的优化与应用。通过高效的数据处理能力和智能算法,提升基因功能预测的准确性与效率,助力医学与农业发展。
|
5月前
|
缓存 NoSQL 算法
高并发秒杀系统实战(Redis+Lua分布式锁防超卖与库存扣减优化)
秒杀系统面临瞬时高并发、资源竞争和数据一致性挑战。传统方案如数据库锁或应用层锁存在性能瓶颈或分布式问题,而基于Redis的分布式锁与Lua脚本原子操作成为高效解决方案。通过Redis的`SETNX`实现分布式锁,结合Lua脚本完成库存扣减,确保操作原子性并大幅提升性能(QPS从120提升至8,200)。此外,分段库存策略、多级限流及服务降级机制进一步优化系统稳定性。最佳实践包括分层防控、黄金扣减法则与容灾设计,强调根据业务特性灵活组合技术手段以应对高并发场景。
1547 7
|
9月前
|
缓存 NoSQL 搜索推荐
【📕分布式锁通关指南 03】通过Lua脚本保证redis操作的原子性
本文介绍了如何通过Lua脚本在Redis中实现分布式锁的原子性操作,避免并发问题。首先讲解了Lua脚本的基本概念及其在Redis中的使用方法,包括通过`eval`指令执行Lua脚本和通过`script load`指令缓存脚本。接着详细展示了如何用Lua脚本实现加锁、解锁及可重入锁的功能,确保同一线程可以多次获取锁而不发生死锁。最后,通过代码示例演示了如何在实际业务中调用这些Lua脚本,确保锁操作的原子性和安全性。
504 6
【📕分布式锁通关指南 03】通过Lua脚本保证redis操作的原子性
|
9月前
|
NoSQL Redis 数据库
Redis 功能扩展 Lua 脚本 对Redis扩展 eval redis.call redis.pcall
通过本文的介绍,我们详细讲解了 Lua 脚本在 Redis 中的作用、`eval` 命令的使用方法以及 `redis.call` 和 `redis.pcall` 的区别和用法。通过合理使用 Lua 脚本,可以实现复杂的业务逻辑,确保操作的原子性,并减少网络开销,从而提高系统的性能和可靠性。
472 13
|
9月前
|
SQL 人工智能 大数据
【4月重点功能发布】阿里云大数据+ AI 一体化平台
【4月重点功能发布】阿里云大数据+ AI 一体化平台
227 0
|
9月前
|
SQL 人工智能 分布式计算
【3月重点功能发布】阿里云大数据+ AI 一体化平台
【3月重点功能发布】阿里云大数据+ AI 一体化平台
208 0
|
缓存 NoSQL Redis
Redis命令——脚本
Redis 脚本使用 Lua 解释器来执行脚本。 Reids 2.6 版本通过内嵌支持 Lua 环境。执行脚本的常用命令为 EVAL。
1461 0
|
缓存 NoSQL Redis
redis必杀命令:脚本
题记: Redis 脚本使用 Lua 解释器来执行脚本。 Reids 2.6 版本通过内嵌支持 Lua 环境。执行脚本的常用命令为 EVAL。
1365 0
|
6月前
|
缓存 NoSQL 关系型数据库
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
下一篇
oss云网关配置