• redis lua 用来传输日志


    2.8 Lua Script

    Redis2.6内置的Lua Script支持,可以在Redis的Server端一次过运行大量逻辑,就像存储过程一样,避免了海量中间数据在网路上的传输。

    Lua自称是在Script语言里关于快的标准,Redis选择了它而不是流行的JavaScript。
    因为Redis的单线程架构,整个Script默认是在一个事务里的。
    Script里涉及的所有Key尽量用变量,从外面传入,使Redis一开始就知道你要改变哪些key。(but why?)
    Eval每次传输一整段Script比较费带宽,可以先用Script Load载入script,返回哈希值。然后用EvalHash执行。因为就是SHA-1,所以任何时候执行返回的哈希值都是一样的。
    内置的Lua库里还很贴心的带了CJSON,可以处理json字符串。
    一段用Redis做Timer的示例代码,下面的script被定期调用,从以触发时间为score的sorted set中取出已到期的Job,放到list中给Client们blocking popup。
     
    — KEYS: [1]job:sleeping, [2]job:ready
    — ARGS: [1]currentTime
    — Comments: result is the  job id
    local jobs=redis.call(‘zrangebyscore’, KEYS[1], ‘-inf’, ARGV[1])
    local count = table.maxn(jobs)
     
    if count>0  then
      — Comments: remove from Sleeping Job sorted set
      redis.call(‘zremrangebyscore’, KEYS[1], ‘-inf’, ARGV[1])
     
      — Comments: add to the Ready Job list
      — Comments: can optimize to use lpush id1,id2,… for better performance
      for i=1,count do
        redis.call(‘lpush’, KEYS[2], jobs[i])
      end
    end

    在Redis使用过程中,Lua脚本的支持无疑给开发者提供一个非常友好的开发环境,从而大幅度解放用户的创造力。如果使用得当,Lua脚本可以给性能和资源消耗带来非常大的改善。取代将数据传送给CPU,脚本允许你在最接近数据的地方执行逻辑,从而减少网络延时和数据的冗余传输。

    在Redis中,Lua一个非常经典的用例就是数据过滤或者将数据聚合到应用程序。通过将处理工作流封装到一个脚本中,你只需要调用它就可以在更短的时间内使用很少的资源来获取一个更小的答案。

    提示:Lua确实非常棒,但是同样也存在一些问题,比如很难进行错误报告和处理。一个明智的方法就是使用Redis的Pub/Sub功能,并且让脚本通过专用信道来推送日志消息。然后建立一个订阅者进程,并进行相应的处理。

  • 相关阅读:
    CentOS防火墙相关命令
    Redis中几种数据类型的基本操作指令
    Pandas字符串操作及实例应用
    Pandas排列和随机采样
    Pandas数据的去重,替换和离散化,异常值的检测
    Pandas重塑和轴向旋转
    Pandas合并数据集之concat、combine_first方法
    Pandas合并数据集之merge、join方法
    转正述职报告
    Pandas操作数据库及保存csv
  • 原文地址:https://www.cnblogs.com/vana/p/9243038.html
Copyright © 2020-2023  润新知