• Redis相关知识


    Redis基础知识

    Redis是什么

    Redis是现在最受欢迎的NoSQL数据库之一,Redis是一个使用ANSI C编写的开源、包含多种数据结构、支持网络、基于内存、可选持久性的键值对存储数据库,其具备如下特性:

    • 基于内存运行,性能高效
    • 支持分布式,理论上可以无限扩展
    • key-value存储系统
    • 开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API

    相比于其他数据库类型,Redis具备的特点是:

    • C/S通讯模型
    • 单进程单线程模型
    • 丰富的数据类型
    • 操作具有原子性
    • 持久化
    • 高并发读写
    • 支持lua脚本

    哪些大厂在使用Redis?

    • github
    • twitter
    • 微博
    • Stack Overflow
    • 阿里巴巴
    • 百度
    • 美团
    • 搜狐

    Redis的应用场景有哪些?

    Redis 的应用场景包括:缓存系统(“热点”数据:高频读、低频写)、计数器、消息队列系统、排行榜、社交网络和实时系统。

     

    Redis的数据类型及主要特性

    Redis提供的数据类型主要分为5种自有类型和一种自定义类型,这5种自有类型包括:String类型、哈希类型、列表类型、集合类型和顺序集合类型。

    String类型:

    它是一个二进制安全的字符串,意味着它不仅能够存储字符串、还能存储图片、视频等多种类型, 最大长度支持512M。

    对每种数据类型,Redis都提供了丰富的操作命令,如:

    • GET/MGET
    • SET/SETEX/MSET/MSETNX
    • INCR/DECR
    • GETSET
    • DEL

    哈希类型:

    该类型是由field和关联的value组成的map。其中,field和value都是字符串类型的。

    Hash的操作命令如下:

    • HGET/HMGET/HGETALL
    • HSET/HMSET/HSETNX
    • HEXISTS/HLEN
    • HKEYS/HDEL
    • HVALS

    列表类型:

    该类型是一个插入顺序排序的字符串元素集合, 基于双链表实现。

    List的操作命令如下:

    • LPUSH/LPUSHX/LPOP/RPUSH/RPUSHX/RPOP/LINSERT/LSET
    • LINDEX/LRANGE
    • LLEN/LTRIM

    集合类型:

    Set类型是一种无顺序集合, 它和List类型最大的区别是:集合中的元素没有顺序, 且元素是唯一的。

    Set类型的底层是通过哈希表实现的,其操作命令为:

    • SADD/SPOP/SMOVE/SCARD
    • SINTER/SDIFF/SDIFFSTORE/SUNION

    Set类型主要应用于:在某些场景,如社交场景中,通过交集、并集和差集运算,通过Set类型可以非常方便地查找共同好友、共同关注和共同偏好等社交关系。

    顺序集合类型:

    ZSet是一种有序集合类型,每个元素都会关联一个double类型的分数权值,通过这个权值来为集合中的成员进行从小到大的排序。与Set类型一样,其底层也是通过哈希表实现的。

    ZSet命令:

    • ZADD/ZPOP/ZMOVE/ZCARD/ZCOUNT
    • ZINTER/ZDIFF/ZDIFFSTORE/ZUNION

    Redis的数据结构

    Redis的数据结构如下图所示:

    关于上表中的部分释义:

    1. 压缩列表是列表键和哈希键的底层实现之一。当一个列表键只包含少量列表项,并且每个列表项要么就是小整数,要么就是长度比较短的字符串,Redis就会使用压缩列表来做列表键的底层实现
    2. 整数集合是集合键的底层实现之一,当一个集合只包含整数值元素,并且这个集合的元素数量不多时,Redis就会使用整数集合作为集合键的底层实现

    如下是定义一个Struct数据结构的例子:

     简单动态字符串SDS (Simple Dynamic String)

    基于C语言中传统字符串的缺陷,Redis自己构建了一种名为简单动态字符串的抽象类型,简称SDS,其结构如下:

    SDS几乎贯穿了Redis的所有数据结构,应用十分广泛。

    SDS的特点

    和C字符串相比,SDS的特点如下:

      1. 常数复杂度获取字符串长度

        Redis中利用SDS字符串的len属性可以直接获取到所保存的字符串的长
        度,直接将获取字符串长度所需的复杂度从C字符串的O(N)降低到了O(1)。

      2. 减少修改字符串时导致的内存重新分配次数

        通过C字符串的特性,我们知道对于一个包含了N个字符的C字符串来说,其底层实现总是N+1个字符长的数组(额外一个空字符结尾)

        那么如果这个时候需要对字符串进行修改,程序就需要提前对这个C字符串数组进行一次内存重分配(可能是扩展或者释放) 

        而内存重分配就意味着是一个耗时的操作。

    Redis巧妙的使用了SDS避免了C字符串的缺陷。在SDS中,buf数组的长度不一定就是字符串的字符数量加一,buf数组里面可以包含未使用的字节,而这些未使用的字节由free属性记录。

    与此同时,SDS采用了空间预分配的策略,避免C字符串每一次修改时都需要进行内存重分配的耗时操作,将内存重分配从原来的每修改N次就分配N次——>降低到了修改N次最多分配N次。

    如下是Redis对SDS的简单定义:

      

    Redis特性1:事务

    • 命令序列化,按顺序执行
    • 原子性
    • 三阶段: 开始事务 - 命令入队 - 执行事务
    • 命令:MULTI/EXEC/DISCARD

    Redis特性2:发布订阅(Pub/Sub)

    • Pub/sub是一种消息通讯模式
    • Pub发送消息, Sub接受消息
    • Redis客户端可以订阅任意数量的频道
    • “fire and forgot”, 发送即遗忘
    • 命令:Publish/Subscribe/Psubscribe/UnSub

      

    Redis特性3:Stream

    • Redis 5.0新增
    • 等待消费
    • 消费组(组内竞争)
    • 消费历史数据
    • FIFO

    以上就是Redis的基本概念,下面我们将介绍在开发过程中可能会踩到的“坑”。

    Redis常见问题解析:击穿

    概念:在Redis获取某一key时, 由于key不存在, 而必须向DB发起一次请求的行为, 称为“Redis击穿”。

    引发击穿的原因:

    • 第一次访问
    • 恶意访问不存在的key
    • Key过期

    合理的规避方案:

    • 服务器启动时, 提前写入
    • 规范key的命名, 通过中间件拦截
    • 对某些高频访问的Key,设置合理的TTL或永不过期

    Redis常见问题解析:雪崩

    概念:Redis缓存层由于某种原因宕机后,所有的请求会涌向存储层,短时间内的高并发请求可能会导致存储层挂机,称之为“Redis雪崩”。

    合理的规避方案:

    • 使用Redis集群
    • 限流

    Redis在产品开发中的应用实践

    为此,我很高兴的为大家介绍,葡萄城架构师Jim将在2019-11-27 14:00 为大家带来一场公开课,其中 Jim除了为大家讲解Redis的基础,同时也会实际演示他所在的项目组使用Redis时碰到的问题以及解决方案,对于刚接触Redis的同学来说,更具参考意义和学习价值,欢迎大家届时参加,公开课地址:https://live.vhall.com/661463644

    • 后端采用nodeJS
    • 使用Azure的Redis服务
    • Redis的使用场景

        -  token缓存, 用于令牌验证

        -  IP白名单

    碰到的问题

    • “网络抖动”或者Redis服务异常导致Redis访问超时
    • Redis客户端驱动稳定性问题

        -  连接池 “Broken connection” 问题

        -  JS的Promise引出的Redis重置问题

    下面我们来简单了解一下Redis的进阶知识。

    进阶之Redis协议简介

    Redis客户端通讯协议:RESP(Redis Serialization Protocol),其特点是:

    • 简单
    • 解析速度快
    • 可读性好

    Redis集群内部通讯协议:RECP(Redis Cluster Protocol ) ,其特点是:

    • 每一个node两个tcp 连接
    • 一个负责client-server通讯(P: 6379)
    • 一个负责node之间通讯(P: 10000 + 6379)

     

    Redis协议支持的数据类型:

    • 简单字符(首字节: “+”)

            “+OK ”

    • 错误(首字节: “-”)

            “-error msg ”

    • 数字(首字节: “:”)

            “:123 ”

    • 批量字符(首字节: “$”)

            “&hello Whoa re you ”

    • 数组(首字节: “*”)

            “*0 ”

            “*-1 ”

    除了Redis,还有什么NoSQL型数据库

    市面上类似于Redis,同样是NoSQL型的数据库有很多,如下图所示,除了Redis,还有MemCache、Cassadra和Mongo。下面,我们就分别对这几个数据库做一下简要的介绍:

    Memcache这是一个和Redis非常相似的数据库,但是它的数据类型没有Redis丰富。Memcache由LiveJournal的Brad Fitzpatrick开发,作为一套分布式的高速缓存系统,被许多网站使用以提升网站的访问速度,对于一些大型的、需要频繁访问数据库的网站访问速度的提升效果十分显著。

    Apache Cassandra(社区内一般简称为C*)这是一套开源分布式NoSQL数据库系统。它最初由Facebook开发,用于储存收件箱等简单格式数据,集Google BigTable的数据模型与Amazon Dynamo的完全分布式架构于一身。Facebook于2008将 Cassandra 开源,由于其良好的可扩展性和性能,被 Apple、Comcast、Instagram、Spotify、eBay、Rackspace、Netflix等知名网站所采用,成为了一种流行的分布式结构化数据存储方案。

    MongoDB:是一个基于分布式文件存储、面向文档的NoSQL数据库,由C++编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系型数据库的,它支持的数据结构非常松散,是一种类似json的BSON格式。

    Redis集群的搭建

    3.   Redis的安装

    3.1. Redis的安装

    Redis是c语言开发的。

    安装redis需要c语言的编译环境。如果没有gcc需要在线安装。yum install gcc-c++

    安装步骤:

    第一步:redis的源码包上传到linux系统。

    第二步:解压缩redis。

    第三步:编译。进入redis源码目录。make

    第四步:安装。make install PREFIX=/usr/local/redis

    PREFIX参数指定redis的安装目录。一般软件安装到/usr目录下

    3.2. 连接redis

    3.2.1.    redis的启动:

    前端启动:在redis的安装目录下直接启动redis-server

    [root@localhost bin]# ./redis-server

    后台启动:

    把/root/redis-3.0.0/redis.conf复制到/usr/local/redis/bin目录下

    [root@localhost redis-3.0.0]# cp redis.conf /usr/local/redis/bin/

    修改配置文件:

     

    [root@localhost bin]# ./redis-server redis.conf

    查看redis进程 ps aux|grep redis:

    [root@localhost bin]# ps aux|grep redis

    root      5190  0.1  0.3  33936  1712 ?        Ssl  18:23   0:00 ./redis-server *:6379   

    root      5196  0.0  0.1   4356   728 pts/0    S+   18:24   0:00 grep redis

    [root@localhost bin]#

    3.2.2.    Redis-cli

    [root@localhost bin]# ./redis-cli

    默认连接localhost运行在6379端口的redis服务。

    [root@localhost bin]# ./redis-cli -h 192.168.25.153 -p 6379

    -h:连接的服务器的地址

    -p:服务的端口号

    关闭redis:[root@localhost bin]# ./redis-cli shutdown

    3.3. Redis五种数据类型

    String:key-value(做缓存)

    Redis中所有的数据都是字符串。命令不区分大小写,key是区分大小写的。Redis是单线程的。Redis中不适合保存内容大的数据。

    get、set、

    incr:加一(生成id)

    Decr:减一

    Hash:key-fields-values(做缓存)

    相当于一个key对应一个map,map中还有key-value

    使用hash对key进行归类。

    Hset:向hash中添加内容

    Hget:从hash中取内容

    List:有顺序可重复

    192.168.25.153:6379> lpush list1 a b c d

    (integer) 4

    192.168.25.153:6379> lrange list1 0 -1

    1) "d"

    2) "c"

    3) "b"

    4) "a"

    192.168.25.153:6379> rpush list1 1 2 3 4

    (integer) 8

    192.168.25.153:6379> lrange list1 0 -1

    1) "d"

    2) "c"

    3) "b"

    4) "a"

    5) "1"

    6) "2"

    7) "3"

    8) "4"

    192.168.25.153:6379>

    192.168.25.153:6379> lpop list1

    "d"

    192.168.25.153:6379> lrange list1 0 -1

    1) "c"

    2) "b"

    3) "a"

    4) "1"

    5) "2"

    6) "3"

    7) "4"

    192.168.25.153:6379> rpop list1

    "4"

    192.168.25.153:6379> lrange list1 0 -1

    1) "c"

    2) "b"

    3) "a"

    4) "1"

    5) "2"

    6) "3"

    192.168.25.153:6379>

    Set:元素无顺序,不能重复

    192.168.25.153:6379> sadd set1 a b c c c d

    (integer) 4

    192.168.25.153:6379> smembers set1

    1) "b"

    2) "c"

    3) "d"

    4) "a"

    192.168.25.153:6379> srem set1 a

    (integer) 1

    192.168.25.153:6379> smembers set1

    1) "b"

    2) "c"

    3) "d"

    192.168.25.153:6379>

    还有集合运算命令,自学。

    SortedSet(zset):有顺序,不能重复

    192.168.25.153:6379> zadd zset1 2 a 5 b 1 c 6 d

    (integer) 4

    192.168.25.153:6379> zrange zset1 0 -1

    1) "c"

    2) "a"

    3) "b"

    4) "d"

    192.168.25.153:6379> zrem zset1 a

    (integer) 1

    192.168.25.153:6379> zrange zset1 0 -1

    1) "c"

    2) "b"

    3) "d"

    192.168.25.153:6379> zrevrange zset1 0 -1

    1) "d"

    2) "b"

    3) "c"

    192.168.25.153:6379> zrange zset1 0 -1 withscores

    1) "c"

    2) "1"

    3) "b"

    4) "5"

    5) "d"

    6) "6"

    192.168.25.153:6379> zrevrange zset1 0 -1 withscores

    1) "d"

    2) "6"

    3) "b"

    4) "5"

    5) "c"

    6) "1"

    192.168.25.153:6379>

    3.4. Key命令

    设置key的过期时间。

    Expire key second:设置key的过期时间

    Ttl key:查看key的有效期

    Persist key:清除key的过期时间。Key持久化。

    192.168.25.153:6379> expire Hello 100

    (integer) 1

    192.168.25.153:6379> ttl Hello

    (integer) 77

    4.   Redis的持久化方案

    Redis的所有数据都是保存到内存中的。

    Rdb:快照形式,定期把内存中当前时刻的数据保存到磁盘。Redis默认支持的持久化方案。

    aof形式:append only file。把所有对redis数据库操作的命令,增删改操作的命令。保存到文件中。数据库恢复时把所有的命令执行一遍即可。

    redis.conf配置文件中配置。

    Rdb的配置:

     

    Aof的配置:

     

    两种持久化方案同时开启使用aof文件来恢复数据库。

    5.   Redis集群的搭建

    5.1. redis-cluster架构图



    redis-cluster投票:容错

     

    架构细节:

    (1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.

    (2)节点的fail是通过集群中超过半数的节点检测失效时才生效.

    (3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可

    (4)redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->value

    Redis 集群中内置了 16384 个哈希槽,当需要在 Redis 集群中放置一个 key-value 时,redis 先对 key 使用 crc16 算法算出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,redis 会根据节点数量大致均等的将哈希槽映射到不同的节点

     

    5.2. Redis集群的搭建

    Redis集群中至少应该有三个节点。要保证集群的高可用,需要每个节点有一个备份机。

    Redis集群至少需要6台服务器。

    搭建伪分布式。可以使用一台虚拟机运行6个redis实例。需要修改redis的端口号7001-7006

    5.2.1.    集群搭建环境

    1、使用ruby脚本搭建集群。需要ruby的运行环境。

    安装ruby

    yum install ruby

    yum install rubygems

    2、安装ruby脚本运行使用的包。

    [root@localhost ~]# gem install redis-3.0.0.gem

    Successfully installed redis-3.0.0

    1 gem installed

    Installing ri documentation for redis-3.0.0...

    Installing RDoc documentation for redis-3.0.0...

    [root@localhost ~]#

    [root@localhost ~]# cd redis-3.0.0/src

    [root@localhost src]# ll *.rb

    -rwxrwxr-x. 1 root root 48141 Apr  1  2015 redis-trib.rb

    5.2.2.    搭建步骤

    需要6台redis服务器。搭建伪分布式。

    需要6个redis实例。

    需要运行在不同的端口7001-7006

    第一步:创建6个redis实例

    每个实例运行在不同的端口。需要修改redis.conf配置文件。配置文件中还需要把cluster-enabled yes前的注释去掉,开启集群模式。

     

    第二步:启动每个redis实例。

    在redis-cluster目录下创建启动脚本start-all.sh,检测一下之前修改的redis能否正常启动,为集群的搭建作准备

     View Code

    为创建的脚本添加可执行权限:

    chmod u+x start-all.sh

    补充:

    如果给所有人添加可执行权限:chmod a+x 文件名;
    如果给文件所有者添加可执行权限:chmod u+x 文件名;
    如果给所在组添加可执行权限:chmod g+x 文件名;
    如果给所在组以外的人添加可执行权限:chmod o+x 文件名

    查看进程,检测redis是否正常启动

    ps aux | gerp redis

    第三步:使用ruby脚本搭建集群。

    ./redis-trib.rb create --replicas n ip:port ...

      -n: 从节点个数

    ./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005 192.168.25.153:7006

    注意:搭建集群使用的redis节点必须是干净的节点,不包含任何数据和残留配置信息。

    可能会遇到的问题和对应的解决方法:

    1)、将需要新增的节点下aof、rdb等本地备份文件删除;

    2)、同时将新Node的集群配置文件删除,即:删除你redis.conf里面cluster-config-file所在的文件;

    3)、再次添加新节点如果还是报错,则登录新Node,./redis-cli–h x –p对数据库进行清除:

    172.168.63.201:7001>  flushdb      #清空当前数据库

    创建关闭集群的脚本:

    [root@localhost redis-cluster]# vim shutdow-all.sh

    redis01/redis-cli -p 7001 shutdown

    redis01/redis-cli -p 7002 shutdown

    redis01/redis-cli -p 7003 shutdown

    redis01/redis-cli -p 7004 shutdown

    redis01/redis-cli -p 7005 shutdown

    redis01/redis-cli -p 7006 shutdown

    [root@localhost redis-cluster]# chmod u+x shutdow-all.sh

    [root@localhost redis-cluster]# ./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005  192.168.25.153:7006

    >>> Creating cluster

    Connecting to node 192.168.25.153:7001: OK

    Connecting to node 192.168.25.153:7002: OK

    Connecting to node 192.168.25.153:7003: OK

    Connecting to node 192.168.25.153:7004: OK

    Connecting to node 192.168.25.153:7005: OK

    Connecting to node 192.168.25.153:7006: OK

    >>> Performing hash slots allocation on 6 nodes...

    Using 3 masters:

    192.168.25.153:7001

    192.168.25.153:7002

    192.168.25.153:7003

    Adding replica 192.168.25.153:7004 to 192.168.25.153:7001

    Adding replica 192.168.25.153:7005 to 192.168.25.153:7002

    Adding replica 192.168.25.153:7006 to 192.168.25.153:7003

    M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001

       slots:0-5460 (5461 slots) master

    M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002

       slots:5461-10922 (5462 slots) master

    M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003

       slots:10923-16383 (5461 slots) master

    S: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004

       replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3

    S: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005

       replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01

    S: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006

       replicates 2935007902d83f20b1253d7f43dae32aab9744e6

    Can I set the above configuration? (type 'yes' to accept): yes

    >>> Nodes configuration updated

    >>> Assign a different config epoch to each node

    >>> Sending CLUSTER MEET messages to join the cluster

    Waiting for the cluster to join.....

    >>> Performing Cluster Check (using node 192.168.25.153:7001)

    M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001

       slots:0-5460 (5461 slots) master

    M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002

       slots:5461-10922 (5462 slots) master

    M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003

       slots:10923-16383 (5461 slots) master

    M: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004

       slots: (0 slots) master

       replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3

    M: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005

       slots: (0 slots) master

       replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01

    M: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006

       slots: (0 slots) master

       replicates 2935007902d83f20b1253d7f43dae32aab9744e6

    [OK] All nodes agree about slots configuration.

    >>> Check for open slots...

    >>> Check slots coverage...

    [OK] All 16384 slots covered.

    [root@localhost redis-cluster]#

    5.3. 集群的使用方法

    Redis-cli连接集群。

    [root@localhost redis-cluster]# redis01/redis-cli -p 7002 -c

    -c:代表连接的是redis集群

    6.   Jedis

    需要把jedis依赖的jar包添加到工程中。Maven工程中需要把jedis的坐标添加到依赖。

    推荐添加到服务层工程中。

    6.1. 连接单机版

    第一步:创建一个Jedis对象。需要指定服务端的ip及端口。

    第二步:使用Jedis对象操作数据库,每个redis命令对应一个方法。

    第三步:打印结果。

    第四步:关闭Jedis

    @Test

         public void testJedis() throws Exception {

             // 第一步:创建一个Jedis对象。需要指定服务端的ip及端口。

             Jedis jedis = new Jedis("192.168.25.153", 6379);

             // 第二步:使用Jedis对象操作数据库,每个redis命令对应一个方法。

             String result = jedis.get("hello");

             // 第三步:打印结果。

              System.out.println(result);

             // 第四步:关闭Jedis

             jedis.close();

         }

    6.2. 连接单机版使用连接池

    第一步:创建一个JedisPool对象。需要指定服务端的ip及端口。

    第二步:从JedisPool中获得Jedis对象。

    第三步:使用Jedis操作redis服务器。

    第四步:操作完毕后关闭jedis对象,连接池回收资源。

    第五步:关闭JedisPool对象。

    @Test

         public void testJedisPool() throws Exception {

             // 第一步:创建一个JedisPool对象。需要指定服务端的ip及端口。

             JedisPool jedisPool = new JedisPool("192.168.25.153", 6379);

             // 第二步:从JedisPool中获得Jedis对象。

             Jedis jedis = jedisPool.getResource();

             // 第三步:使用Jedis操作redis服务器。

             jedis.set("jedis", "test");

             String result = jedis.get("jedis");

             System.out.println(result);

             // 第四步:操作完毕后关闭jedis对象,连接池回收资源。

             jedis.close();

             // 第五步:关闭JedisPool对象。

             jedisPool.close();

         }

    6.3. 连接集群版

    第一步:使用JedisCluster对象。需要一个Set<HostAndPort>参数。Redis节点的列表。

    第二步:直接使用JedisCluster对象操作redis。在系统中单例存在。

    第三步:打印结果

    第四步:系统关闭前,关闭JedisCluster对象。

    @Test

         public void testJedisCluster() throws Exception {

             // 第一步:使用JedisCluster对象。需要一个Set<HostAndPort>参数。Redis节点的列表。

             Set<HostAndPort> nodes = new HashSet<>();

             nodes.add(new HostAndPort("192.168.25.153", 7001));

             nodes.add(new HostAndPort("192.168.25.153", 7002));

             nodes.add(new HostAndPort("192.168.25.153", 7003));

             nodes.add(new HostAndPort("192.168.25.153", 7004));

             nodes.add(new HostAndPort("192.168.25.153", 7005));

             nodes.add(new HostAndPort("192.168.25.153", 7006));

             JedisCluster jedisCluster = new JedisCluster(nodes);

             // 第二步:直接使用JedisCluster对象操作redis。在系统中单例存在。

             jedisCluster.set("hello", "100");

             String result = jedisCluster.get("hello");

             // 第三步:打印结果

             System.out.println(result);

             // 第四步:系统关闭前,关闭JedisCluster对象。

             jedisCluster.close();

         }

    7.   向业务逻辑中添加缓存

    7.1. 接口封装

    常用的操作redis的方法提取出一个接口,分别对应单机版和集群版创建两个实现类。

    7.1.1.    接口定义

     1 public interface JedisClient {
     2 
     3  
     4 
     5      String set(String key, String value);
     6 
     7      String get(String key);
     8 
     9      Boolean exists(String key);
    10 
    11      Long expire(String key, int seconds);
    12 
    13      Long ttl(String key);
    14 
    15      Long incr(String key);
    16 
    17      Long hset(String key, String field, String value);
    18 
    19      String hget(String key, String field);
    20 
    21      Long hdel(String key, String... field);
    22 
    23 }

    7.1.2.    单机版实现类 

    1 public class JedisClientPool implements JedisClient {
      2 
      3     
      4 
      5      @Autowired
      6 
      7      private JedisPool jedisPool;
      8 
      9  
     10 
     11      @Override
     12 
     13      public String set(String key, String value) {
     14 
     15          Jedis jedis = jedisPool.getResource();
     16 
     17          String result = jedis.set(key, value);
     18 
     19          jedis.close();
     20 
     21          return result;
     22 
     23      }
     24 
     25  
     26 
     27      @Override
     28 
     29      public String get(String key) {
     30 
     31          Jedis jedis = jedisPool.getResource();
     32 
     33          String result = jedis.get(key);
     34 
     35          jedis.close();
     36 
     37          return result;
     38 
     39      }
     40 
     41  
     42 
     43      @Override
     44 
     45      public Boolean exists(String key) {
     46 
     47          Jedis jedis = jedisPool.getResource();
     48 
     49          Boolean result = jedis.exists(key);
     50 
     51          jedis.close();
     52 
     53          return result;
     54 
     55      }
     56 
     57  
     58 
     59      @Override
     60 
     61      public Long expire(String key, int seconds) {
     62 
     63          Jedis jedis = jedisPool.getResource();
     64 
     65          Long result = jedis.expire(key, seconds);
     66 
     67          jedis.close();
     68 
     69          return result;
     70 
     71      }
     72 
     73  
     74 
     75      @Override
     76 
     77      public Long ttl(String key) {
     78 
     79          Jedis jedis = jedisPool.getResource();
     80 
     81          Long result = jedis.ttl(key);
     82 
     83          jedis.close();
     84 
     85          return result;
     86 
     87      }
     88 
     89  
     90 
     91      @Override
     92 
     93      public Long incr(String key) {
     94 
     95          Jedis jedis = jedisPool.getResource();
     96 
     97          Long result = jedis.incr(key);
     98 
     99          jedis.close();
    100 
    101          return result;
    102 
    103      }
    104 
    105  
    106 
    107      @Override
    108 
    109      public Long hset(String key, String field, String value) {
    110 
    111          Jedis jedis = jedisPool.getResource();
    112 
    113          Long result = jedis.hset(key, field, value);
    114 
    115          jedis.close();
    116 
    117          return result;
    118 
    119      }
    120 
    121  
    122 
    123      @Override
    124 
    125      public String hget(String key, String field) {
    126 
    127          Jedis jedis = jedisPool.getResource();
    128 
    129          String result = jedis.hget(key, field);
    130 
    131          jedis.close();
    132 
    133          return result;
    134 
    135      }
    136 
    137  
    138 
    139      @Override
    140 
    141      public Long hdel(String key, String... field) {
    142 
    143          Jedis jedis = jedisPool.getResource();
    144 
    145          Long result = jedis.hdel(key, field);
    146 
    147          jedis.close();
    148 
    149          return result;
    150 
    151      }
    152 
    153  
    154 
    155 }
     
    

      

    配置:applicationContext-redis.xml

    <?xml version="1.0" encoding="UTF-8"?>
     2 
     3 <beans xmlns="http://www.springframework.org/schema/beans"
     4 
     5      xmlns:context="http://www.springframework.org/schema/context" xmlns:p="http://www.springframework.org/schema/p"
     6 
     7      xmlns:aop="http://www.springframework.org/schema/aop" xmlns:tx="http://www.springframework.org/schema/tx"
     8 
     9      xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    10 
    11      xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans4.2.xsd
    12 
    13      http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context4.2.xsd
    14 
    15      http://www.springframework.org/schema/aop http://www.springframework.org/schema/aop/spring-aop4.2.xsd http://www.springframework.org/schema/tx http://www.springframework.org/schema/tx/spring-tx4.2.xsd
    16 
    17      http://www.springframework.org/schema/util http://www.springframework.org/schema/util/spring-util4.2.xsd">
    18 
    19  
    20 
    21      <!-- 配置单机版的连接 -->
    22 
    23      <bean id="jedisPool" class="redis.clients.jedis.JedisPool">
    24 
    25          <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    26 
    27          <constructor-arg name="port" value="6379"></constructor-arg>
    28 
    29      </bean>
    30 
    31      <bean id="jedisClientPool" class="com.taotao.jedis.JedisClientPool"/>
    32 
    33     
    34 
    35 </beans>

    7.1.3.    集群版实现类 

    1 package com.taotao.jedis;
      2 
      3  
      4 
      5 import org.springframework.beans.factory.annotation.Autowired;
      6 
      7  
      8 
      9 import redis.clients.jedis.JedisCluster;
     10 
     11  
     12 
     13 public class JedisClientCluster implements JedisClient {
     14 
     15     
     16 
     17      @Autowired
     18 
     19      private JedisCluster jedisCluster;
     20 
     21  
     22 
     23      @Override
     24 
     25      public String set(String key, String value) {
     26 
     27          return jedisCluster.set(key, value);
     28 
     29      }
     30 
     31  
     32 
     33      @Override
     34 
     35      public String get(String key) {
     36 
     37          return jedisCluster.get(key);
     38 
     39      }
     40 
     41  
     42 
     43      @Override
     44 
     45      public Boolean exists(String key) {
     46 
     47          return jedisCluster.exists(key);
     48 
     49      }
     50 
     51  
     52 
     53      @Override
     54 
     55      public Long expire(String key, int seconds) {
     56 
     57          return jedisCluster.expire(key, seconds);
     58 
     59      }
     60 
     61  
     62 
     63      @Override
     64 
     65      public Long ttl(String key) {
     66 
     67          return jedisCluster.ttl(key);
     68 
     69      }
     70 
     71  
     72 
     73      @Override
     74 
     75      public Long incr(String key) {
     76 
     77          return jedisCluster.incr(key);
     78 
     79      }
     80 
     81  
     82 
     83      @Override
     84 
     85      public Long hset(String key, String field, String value) {
     86 
     87          return jedisCluster.hset(key, field, value);
     88 
     89      }
     90 
     91  
     92 
     93      @Override
     94 
     95      public String hget(String key, String field) {
     96 
     97          return jedisCluster.hget(key, field);
     98 
     99      }
    100 
    101  
    102 
    103      @Override
    104 
    105      public Long hdel(String key, String... field) {
    106 
    107          return jedisCluster.hdel(key, field);
    108 
    109      }
    110 
    111  
    112 
    113 }


    Spring的配置:

    1 <!-- 集群版的配置 -->
     2 
     3      <bean id="jedisCluster" class="redis.clients.jedis.JedisCluster">
     4 
     5          <constructor-arg>
     6 
     7               <set>
     8 
     9                    <bean class="redis.clients.jedis.HostAndPort">
    10 
    11                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    12 
    13                        <constructor-arg name="port" value="7001"></constructor-arg>
    14 
    15                    </bean>
    16 
    17                    <bean class="redis.clients.jedis.HostAndPort">
    18 
    19                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    20 
    21                        <constructor-arg name="port" value="7002"></constructor-arg>
    22 
    23                    </bean>
    24 
    25                    <bean class="redis.clients.jedis.HostAndPort">
    26 
    27                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    28 
    29                        <constructor-arg name="port" value="7003"></constructor-arg>
    30 
    31                    </bean>
    32 
    33                    <bean class="redis.clients.jedis.HostAndPort">
    34 
    35                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    36 
    37                        <constructor-arg name="port" value="7004"></constructor-arg>
    38 
    39                    </bean>
    40 
    41                    <bean class="redis.clients.jedis.HostAndPort">
    42 
    43                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    44 
    45                        <constructor-arg name="port" value="7005"></constructor-arg>
    46 
    47                    </bean>
    48 
    49                    <bean class="redis.clients.jedis.HostAndPort">
    50 
    51                        <constructor-arg name="host" value="192.168.25.153"></constructor-arg>
    52 
    53                        <constructor-arg name="port" value="7006"></constructor-arg>
    54 
    55                    </bean>
    56 
    57               </set>
    58 
    59          </constructor-arg>
    60 
    61      </bean>
    62 
    63      <bean id="jedisClientCluster" class="com.taotao.jedis.JedisClientCluster"/>


    注意:单机版和集群版不能共存,使用单机版时注释集群版的配置。使用集群版,把单机版注释。 

    7.2. 封装代码测试

     1 @Test
     2 
     3      public void testJedisClient() throws Exception {
     4 
     5          //初始化Spring容器
     6 
     7          ApplicationContext applicationContext = new ClassPathXmlApplicationContext("classpath:spring/applicationContext-*.xml");
     8 
     9          //从容器中获得JedisClient对象
    10 
    11          JedisClient jedisClient = applicationContext.getBean(JedisClient.class);
    12 
    13          jedisClient.set("first", "100");
    14 
    15          String result = jedisClient.get("first");
    16 
    17          System.out.println(result);
    18 
    19         
    20 
    21                   
    22 
    23      }

    7.3. 添加缓存 

    7.3.1.    功能分析

    查询内容列表时添加缓存。

    1、查询数据库之前先查询缓存。

    2、查询到结果,直接响应结果。

    3、查询不到,缓存中没有需要查询数据库。

    4、把查询结果添加到缓存中。

    5、返回结果。

    向redis中添加缓存:

    Key:cid

    Value:内容列表。需要把java对象转换成json。

    使用hash对key进行归类。

    HASH_KEY:HASH

                |--KEY:VALUE

                |--KEY:VALUE

                |--KEY:VALUE

                |--KEY:VALUE

    注意:添加缓存不能影响正常业务逻辑。

    7.3.2.    代码实现

    用 try catch{} 代码块包裹缓存代码,即是缓存代码如下异常,也不能影响正常的业务逻辑。

      @Override
     2 
     3      public List<TbContent> getContentList(long cid) {
     4 
     5          //查询缓存
     6 
     7          try {
     8 
     9               String json = jedisClient.hget(CONTENT_KEY, cid + "");
    10 
    11               //判断json是否为空
    12 
    13               if (StringUtils.isNotBlank(json)) {
    14 
    15                    //把json转换成list
    16 
    17                    List<TbContent> list = JsonUtils.jsonToList(json, TbContent.class);
    18 
    19                    return list;
    20 
    21               }
    22 
    23          } catch (Exception e) {
    24 
    25               e.printStackTrace();
    26 
    27          }
    28 
    29          //根据cid查询内容列表
    30 
    31          TbContentExample example = new TbContentExample();
    32 
    33          //设置查询条件
    34 
    35          Criteria criteria = example.createCriteria();
    36 
    37          criteria.andCategoryIdEqualTo(cid);
    38 
    39          //执行查询
    40 
    41          List<TbContent> list = contentMapper.selectByExample(example);
    42 
    43          //向缓存中添加数据
    44 
    45          try {
    46 
    47               jedisClient.hset(CONTENT_KEY, cid + "", JsonUtils.objectToJson(list));
    48 
    49          } catch (Exception e) {
    50 
    51               e.printStackTrace();
    52 
    53          }
    54 
    55          return list;
    56 
    57      }
     

    7.4. 缓存同步 

    对内容信息做增删改操作后只需要把对应缓存删除即可。

    可以根据cid删除。

    @Override
    
         public TaotaoResult addContent(TbContent content) {
    
             //补全属性
    
             content.setCreated(new Date());
    
             content.setUpdated(new Date());
    
             //插入数据
    
             contentMapper.insert(content);
    
             //缓存同步
    
             jedisClient.hdel(CONTENT_KEY, content.getCategoryId().toString());
    
            
    
             return TaotaoResult.ok();
    
         }
     
  • 相关阅读:
    Flask、Vue部署总结
    Recat教程(二)
    C第一个程序
    React教程(一)
    Flask+uwsgi+nginx 部署
    使用Dockerfile部署简单的应用
    Typescript搭建开发环境
    Typescript模块化/命名空间/装饰器
    Typescript的泛型/泛型接口
    修改git密码后,终端fatal: Authentication failed for'http://xxx/xxx.git'
  • 原文地址:https://www.cnblogs.com/momoyan/p/14013529.html
Copyright © 2020-2023  润新知