Redis Lua 教程

lua-redis 简介
在Redis中使用Lua脚本在业务开发中是比较常见的事情,使用Lua的优点有以下几点。

  1. 对于与多次redis指令的发送,使用Lua脚本可以减少网络的开销。当网络传输慢或者响应要求高的场景中尤为关键。
    Lua脚本可以将多个请求通过脚本形式一次进行处理,减少网络的相关时延。Redis还提供了Pipeline来解决这个问题,
    但是在前面指令会影响后面指令逻辑的场景下,Pipeline并不能满足。
  2. 原子操作。在Lua脚本中会将整个脚本作为一个整体来执行,中间不会被其他指令而打断,因此保证了原子性
    因此在我们写Lua脚本时,无需考虑竞争而导致的整体数据状态不一致的问题,并且无需使用事务。并且因为此特性,
    需确保脚本尽可能不要运行时间过长,要确保脚本执行的粒度最小化。
  3. 复用和封装。针对于一些通用能力的功能,把这些放到redis脚本中去实现。
    其他客户端调用相同的脚本代码,从而达到逻辑的复用
对比Lua脚本与事务: Lua脚本本身也可以看作为一种事务,而且使用脚本起来更简单,并且可控制的流程更灵活。
在使用Redis事务的时候会遇到两种问题
  • 事务在调用EXEC之前,产生了语法错误(如参数数量,参数名等问题)或者服务器内存等问题。
    遇到这一类问题是,会在服务器运行这些指令前发现这些问题(2.6.5之后),并且终止此次的事务。
  • 事务执行EXEC调用之后的失败,如事务中某个键的类型错误的问题。中间指令的错误并不会终止后面的流程,
    也不会导致前面指令的回滚。然而在Lua脚本中,你可以完全控制这些。
Lua-Redis指令教程
注入和使用脚本:
  1. 运行脚本时把脚本发送到Redis(网络开销较大)
    EVAL script numkeys [key ...] [arg ...]# 运行脚本 redis> EVAL "return {KEYS[1],KEYS[2],ARGV[1],ARGV[2]}" 2 key1 key2 first second# 运行只读脚本,脚本需要不包含任何修改内容的操作。这个指令可以随意被kill掉, # 而且不会影响到副本的stream。这个指令可以在master和replica上执行。 redis> EVAL_RO "return {KEYS[1],KEYS[2],ARGV[1],ARGV[2]}" 2 key1 key2 first second

  2. 上传脚本,之后使用SHA1校验和来调用脚本。(潜在碰撞问题,在使用时一般会忽视)
    SCRIPT LOAD script EVALSHA sha1 numkeys key [key ...] arg [arg ...]redis> SCRIPT LOAD "return 'hello moto'" "232fd51614574cf0867b83d384a5e898cfd24e5a"# 运行脚本 redis> EVALSHA 232fd51614574cf0867b83d384a5e898cfd24e5a 0 "hello moto"# 运行只读脚本,脚本需要不包含任何修改内容的操作。这个指令可以随意被kill掉, # 而且不会影响到副本的stream。这个指令可以在master和replica上执行。 redis> EVALSHA 232fd51614574cf0867b83d384a5e898cfd24e5a 0

  3. 其他一些指令
  4. SCRIPT DEBUG 用来调试脚本 Document
  5. SCRIPT EXISTS 通过校验值用来检查脚本是否存在 Document
  6. SCRIPT FLUSH 清除脚本 Document
  7. SCRIPT KILL 停到现在执行中的脚本,默认脚本没有写操作 Document
  8. 注意点
    运行脚本需要严格按照Keys和Args的要求来进行传参。
    所有操作到的redis key应放到Keys对象中,否则可能会影响到在redis集群中错误表现。
    # Bad > eval "return redis.call('set','foo','bar')" 0 OK# Good > eval "return redis.call('set',KEYS[1],'bar')" 1 foo OK

调用redis指令 在redis lua脚本中最常用的就是调用redis原生的指令。有以下两个指令:
  1. redis.call(command, key, arg1, arg2...): 当调用发生错误时,自动终止脚本,强制把相关Lua 错误返回给客户端。
  2. redis.pcall(command, key, arg1, arg2...): 当调用发生错误时,会进行错误拦截,并返回相关错误。
当调用redis.call和redis.pcall指令时Redis Reply会转换为Lua类型,当Lua脚本返回时,会将Lua类型转换为Redis Reply。
因此这两种类型的转换是需要知晓的。可以阅读此文档了解Redis协议。Link
  • Redis integer reply: 如EXISTS...
  • Redis bulk reply: 如GET...
  • Redis multi bulk reply: 如LRANGE...
  • Redis status reply: 如SET...
  • Redis error reply: 指令错误...
转换表
  • Redis回复类型转Lua类型转换表:
    Redis integer reply->Lua numberRedis bulk reply->Lua stringRedis multi bulk reply->Lua table (may have other Redis data types nested)Redis status reply->Lua table with a single ok field containing the statusRedis error reply->Lua table with a single err field containing the errorRedis Nil bulk reply->Lua false boolean typeRedis Nil multi bulk reply->Lua false boolean type

  • Lua类型类型转Redis回复转换表:
    Lua number->Redis integer reply (the number is converted into an integer)Lua string->Redis bulk replyLua table (array)->Redis multi bulk reply (truncated to the first nil inside the Lua array if any)Lua table with->Redis status reply a single ok fieldLua table with->Redis error reply a single err fieldLua boolean false->Redis Nil bulk reply.

  • 注意事项
  1. Lua只有一个数字类型,Lua number。没有区分integer和floats,因此将永远转换Lua numbers为integer回复
    如果需要floats类型,请return字符串。(ZSCORE指令就是这么实现的)
  2. 由于Lua语义原因,Lua array不可以有nils。当redis reply转换到Lua array时会终止运行
  3. Lua Table包含keys(和其values),转换成redis reply将不会包含keys
RESP3 - Redis 6 协议 如需要了解请查看官方文档 Link
示例
【Redis Lua 教程】代码
Reference:
  • Redis Lua实战 Link
  • Redis 官方文档 Link

    推荐阅读