• 基于Redis的在线用户列表解决方案


    前言:

    由于项目需求,需要在集群环境下实现在线用户列表的功能,并依靠在线列表实现用户单一登陆(同一账户只能一处登陆)功能:

    在单机环境下,在线列表的实现方案可以采用SessionListener来完成,当有Session创建和销毁的时候做相应的操作即可完成功能及将相应的Session的引用存放于内存中,由于持有了所有的Session的引用,故可以方便的实现用户单一登陆的功能(比如在第二次登陆的时候使之前登陆的账户所在的Session失效)。

    而在集群环境下,由于用户的请求可能分布在不同的Web服务器上,继续将在线用户列表储存在单机内存中已经不能满足需要,不同的Web服务器将会产生不同的在线列表,并且不能有效的实现单一用户登陆的功能,因为某一用户可能并不在接受到退出请求的Web服务器的在线用户列表中(在集群中的某台服务器上完成的登陆操作,而在其他服务器上完成退出操作)。

    现有解决方案:

    1.将用户的在线情况记录进入数据库中,依靠数据库完成对登陆状况的检测

    2.将在线列表放在一个公共的缓存服务器上

    由于缓存服务器可以为缓存内容设置指定有效期,可以方便实现Session过期的效果,以及避免让数据库的读写性能成为系统瓶颈等原因,我们采用了Redis来作为缓存服务器用于实现该功能。

    单机环境下的解决方案:

    基于HttpSessionListener:

     1 import java.util.Date;
     2 import java.util.Hashtable;
     3 import java.util.Iterator;
     4 import javax.servlet.http.HttpSession;
     5 import javax.servlet.http.HttpSessionEvent;
     6 import javax.servlet.http.HttpSessionListener;
     7 import com.xxx.common.util.StringUtil;
     8 /**
     9  * 
    10  * @ClassName: SessionListener
    11  * @Description: 记录所有登陆的Session信息,为在线列表做基础
    12  * @author libaoting
    13  * @date 2013-9-18 09:35:13
    14  *
    15  */
    16 public class SessionListener implements HttpSessionListener {
    17     //在线列表<uid,session>
    18     private static Hashtable<String,HttpSession> sessionList = new Hashtable<String, HttpSession>();
    19     public void sessionCreated(HttpSessionEvent event) {
    20         //不做处理,只处理登陆用户的列表
    21     }
    22     public void sessionDestroyed(HttpSessionEvent event) {
    23         removeSession(event.getSession());
    24     }
    25     public static void removeSession(HttpSession session){
    26         if(session == null){
    27             return ;
    28         }
    29         String uid=(String)session.getAttribute("clientUserId");//已登陆状态会将用户的UserId保存在session中
    30         if(!StringUtil.isBlank(uid)){//判断是否登陆状态
    31             removeSession(uid);
    32         }
    33     }
    34     public static void removeSession(String uid){
    35         HttpSession session = sessionList.get(uid);
    36         try{
    37             sessionList.remove(uid);//先执行,防止session.invalidate()报错而不执行
    38             if(session != null){
    39                 session.invalidate();
    40             }
    41         }catch (Exception e) {
    42             System.out.println("Session invalidate error!");
    43         }
    44     }
    45     public static void addSession(String uid,HttpSession session){
    46         sessionList.put(uid, session);
    47     }
    48     public static int getSessionCount(){
    49         return sessionList.size();
    50     }
    51     public static Iterator<HttpSession> getSessionSet(){
    52         return sessionList.values().iterator();
    53     }
    54     public static HttpSession getSession(String id){
    55         return sessionList.get(id);
    56     }
    57     public static boolean contains(String uid){
    58         return sessionList.containsKey(uid);
    59     }
    60     /**
    61      * 
    62      * @Title: isLoginOnThisSession
    63      * @Description: 检测是否已经登陆
    64      * @param @param uid 用户UserId
    65      * @param @param sid 发起请求的用户的SessionId
    66      * @return boolean true 校验通过 
    67      */
    68     public static boolean isLoginOnThisSession(String uid,String sid){
    69         if(uid==null||sid==null){
    70             return false;
    71         }
    72         if(contains(uid)){
    73             HttpSession session = sessionList.get(uid);
    74             if(session!=null&&session.getId().equals(sid)){
    75                 return true;
    76             }
    77         }
    78         return false;
    79     }
    80 }

      用户的在线状态全部维护记录在sessionList中,并且可以通过sessionList获取到任意用户的session对象,可以用来完成使指定用户离线的功能(调用该用户的session.invalidate()方法)。

    用户登录的时候调用addSession(uid,session)方法将用户与其登录的Session信息记录至sessionList中,再退出的时候调用removeSession(session) or removeSession(uid)方法,在强制下线的时候调用removeSession(uid)方法,以及一些其他的操作即可实现相应的功能。

    基于Redis的解决方案:

    该解决方案的实质是将在线列表的所在的内存共享出来,让集群环境下所有的服务器都能够访问到这部分数据,并且将用户的在线状态在这块内存中进行维护。

    Redis连接池工具类:

      1 import java.util.ResourceBundle;
      2 import redis.clients.jedis.Jedis;
      3 import redis.clients.jedis.JedisPool;
      4 import redis.clients.jedis.JedisPoolConfig;
      5 public class RedisPoolUtils {
      6     private static final JedisPool pool;
      7     static{
      8         ResourceBundle bundle = ResourceBundle.getBundle("redis");
      9         JedisPoolConfig config = new JedisPoolConfig();
     10         if (bundle == null) {    
     11             throw new IllegalArgumentException("[redis.properties] is not found!");    
     12         }
     13         //设置池配置项值  
     14         config.setMaxActive(Integer.valueOf(bundle.getString("jedis.pool.maxActive")));    
     15         config.setMaxIdle(Integer.valueOf(bundle.getString("jedis.pool.maxIdle")));    
     16         config.setMaxWait(Long.valueOf(bundle.getString("jedis.pool.maxWait")));    
     17         config.setTestOnBorrow(Boolean.valueOf(bundle.getString("jedis.pool.testOnBorrow")));    
     18         config.setTestOnReturn(Boolean.valueOf(bundle.getString("jedis.pool.testOnReturn")));
     19         pool = new JedisPool(config, bundle.getString("redis.ip"),Integer.valueOf(bundle.getString("redis.port")) );
     20     }
     21     /**
     22      * 
     23      * @Title: release
     24      * @Description: 释放连接
     25      * @param @param jedis
     26      * @return void
     27      * @throws
     28      */
     29     public static void release(Jedis jedis){
     30         pool.returnResource(jedis);
     31     }
     32     public static Jedis getJedis(){
     33         return pool.getResource();
     34     }
     35 }
     36 Redis在线列表工具类:
     37 import java.util.ArrayList;
     38 import java.util.Collections;
     39 import java.util.Comparator;
     40 import java.util.Date;
     41 import java.util.List;
     42 import java.util.Set;
     43 import net.sf.json.JSONObject;
     44 import net.sf.json.JsonConfig;
     45 import net.sf.json.processors.JsonValueProcessor;
     46 import cn.sccl.common.util.StringUtil;
     47 import com.xxx.common.util.JsonDateValueProcessor;
     48 import com.xxx.user.model.ClientUser;
     49 import redis.clients.jedis.Jedis;
     50 import redis.clients.jedis.Pipeline;
     51 import tools.Constants;
     52 /**
     53  * 
     54  * Redis缓存中存放两组key:
     55  * 1.SID_PREFIX开头,存放登陆用户的SessionId与ClientUser的Json数据
     56  * 2.UID_PREFIX开头,存放登录用户的UID与SessionId对于的数据
     57  *
     58  * 3.VID_PREFIX开头,存放位于指定页面用户的数据(与Ajax一起使用,用于实现指定页面同时浏览人数的限制功能)
     59  * 
     60  * @ClassName: OnlineUtils
     61  * @Description: 在线列表操作工具类
     62  * @author BuilderQiu
     63  * @date 2014-1-9 上午09:25:43
     64  *
     65  */
     66 public class OnlineUtils {
     67     //KEY值根据SessionID生成    
     68     private static final String SID_PREFIX = "online:sid:";
     69     private static final String UID_PREFIX = "online:uid:";
     70     private static final String VID_PREFIX = "online:vid:";
     71     private static final int OVERDATETIME = 30 * 60;
     72     private static final int BROADCAST_OVERDATETIME = 70;//ax每60秒发起一次,超过BROADCAST_OVERDATETIME时间长度未发起表示已经离开该页面
     73     public static void login(String sid,ClientUser user){
     74         Jedis jedis = RedisPoolUtils.getJedis();
     75         jedis.setex(SID_PREFIX+sid, OVERDATETIME, userToString(user));
     76         jedis.setex(UID_PREFIX+user.getId(), OVERDATETIME, sid);
     77         RedisPoolUtils.release(jedis);
     78     }
     79     public static void broadcast(String uid,String identify){
     80         if(uid==null||"".equals(uid)) //异常数据,正常情况下登陆用户才会发起该请求
     81             return ;
     82         Jedis jedis = RedisPoolUtils.getJedis();
     83         jedis.setex(VID_PREFIX+identify+":"+uid, BROADCAST_OVERDATETIME, uid);
     84         RedisPoolUtils.release(jedis);
     85     }
     86     private static String userToString(ClientUser user){
     87         JsonConfig  config = new JsonConfig();
     88         JsonValueProcessor processor = new JsonDateValueProcessor("yyyy-MM-dd HH:mm:ss");
     89         config.registerJsonValueProcessor(Date.class, processor);
     90         JSONObject obj = JSONObject.fromObject(user, config);
     91         return obj.toString();
     92     }
     93     /**
     94      * 
     95      * @Title: logout
     96      * @Description: 退出
     97      * @param @param sessionId
     98      * @return void
     99      * @throws
    100      */
    101     public static void logout(String sid,String uid){
    102         Jedis jedis = RedisPoolUtils.getJedis();
    103         jedis.del(SID_PREFIX+sid);
    104         jedis.del(UID_PREFIX+uid);
    105         RedisPoolUtils.release(jedis);
    106     }
    107     /**
    108      * 
    109      * @Title: logout
    110      * @Description: 退出
    111      * @param @param UserId  使指定用户下线
    112      * @return void
    113      * @throws
    114      */
    115     public static void logout(String uid){
    116         Jedis jedis = RedisPoolUtils.getJedis();
    117         //删除sid
    118         jedis.del(SID_PREFIX+jedis.get(UID_PREFIX+uid));
    119         //删除uid
    120         jedis.del(UID_PREFIX+uid);
    121         RedisPoolUtils.release(jedis);
    122     }
    123     public static String getClientUserBySessionId(String sid){
    124         Jedis jedis = RedisPoolUtils.getJedis();
    125         String user = jedis.get(SID_PREFIX+sid);
    126         RedisPoolUtils.release(jedis);
    127         return user;
    128     }
    129     public static String getClientUserByUid(String uid){
    130         Jedis jedis = RedisPoolUtils.getJedis();
    131         String user = jedis.get(SID_PREFIX+jedis.get(UID_PREFIX+uid));
    132         RedisPoolUtils.release(jedis);
    133         return user;
    134     }
    135     /**
    136      * 
    137      * @Title: online
    138      * @Description: 所有的key
    139      * @return List  
    140      * @throws
    141      */
    142     public static List online(){
    143         Jedis jedis = RedisPoolUtils.getJedis();
    144         Set online = jedis.keys(SID_PREFIX+"*");
    145         RedisPoolUtils.release(jedis);
    146         return new ArrayList(online);
    147     }
    148     /**
    149      * 
    150      * @Title: online
    151      * @Description: 分页显示在线列表
    152      * @return List  
    153      * @throws
    154      */
    155     public static List onlineByPage(int page,int pageSize) throws Exception{
    156         Jedis jedis = RedisPoolUtils.getJedis();
    157         Set onlineSet = jedis.keys(SID_PREFIX+"*");
    158         List onlines =new ArrayList(onlineSet);
    159         if(onlines.size() == 0){
    160             return null;
    161         }
    162         Pipeline pip = jedis.pipelined();
    163         for(Object key:onlines){
    164             pip.get(getKey(key));
    165         }
    166         List result = pip.syncAndReturnAll();
    167         RedisPoolUtils.release(jedis);
    168         List<ClientUser> listUser=new ArrayList<ClientUser>();
    169         for(int i=0;i<result.size();i++){
    170             listUser.add(Constants.json2ClientUser((String)result.get(i)));
    171         }
    172         Collections.sort(listUser,new Comparator<ClientUser>(){
    173             public int compare(ClientUser o1, ClientUser o2) {
    174                 return o2.getLastLoginTime().compareTo(o1.getLastLoginTime());
    175             }
    176         });
    177         onlines=listUser;
    178         int start = (page - 1) * pageSize;
    179         int toIndex=(start+pageSize)>onlines.size()?onlines.size():start+pageSize;
    180         List list = onlines.subList(start, toIndex);
    181         return list;
    182     }
    183     private static String getKey(Object obj){
    184         String temp = String.valueOf(obj);
    185         String key[] = temp.split(":");
    186         return SID_PREFIX+key[key.length-1];
    187     }
    188     /**
    189      * 
    190      * @Title: onlineCount
    191      * @Description: 总在线人数
    192      * @param @return
    193      * @return int
    194      * @throws
    195      */
    196     public static int onlineCount(){
    197         Jedis jedis = RedisPoolUtils.getJedis();
    198         Set online = jedis.keys(SID_PREFIX+"*");
    199         RedisPoolUtils.release(jedis);
    200         return online.size();
    201     }
    202     /**
    203      * 获取指定页面在线人数总数
    204      */
    205     public static int broadcastCount(String identify) {
    206         Jedis jedis = RedisPoolUtils.getJedis();
    207         Set online = jedis.keys(VID_PREFIX+identify+":*");
    208         RedisPoolUtils.release(jedis);
    209         return online.size();
    210     }
    211     /**
    212      * 自己是否在线
    213      */
    214     public static boolean broadcastIsOnline(String identify,String uid) {
    215         Jedis jedis = RedisPoolUtils.getJedis();
    216         String online = jedis.get(VID_PREFIX+identify+":"+uid);
    217         RedisPoolUtils.release(jedis);
    218         return !StringUtil.isBlank(online);//不为空就代表已经找到数据了,也就是上线了
    219     }
    220     /**
    221      * 获取指定页面在线人数总数
    222      */
    223     public static int broadcastCount() {
    224         Jedis jedis = RedisPoolUtils.getJedis();
    225         Set online = jedis.keys(VID_PREFIX+"*");
    226         RedisPoolUtils.release(jedis);
    227         return online.size();
    228     }
    229     /**
    230      * 
    231      * @Title: isOnline
    232      * @Description: 指定账号是否登陆
    233      * @param @param sessionId
    234      * @param @return
    235      * @return boolean 
    236      * @throws
    237      */
    238     public static boolean isOnline(String uid){
    239         Jedis jedis = RedisPoolUtils.getJedis();
    240         boolean isLogin = jedis.exists(UID_PREFIX+uid);
    241         RedisPoolUtils.release(jedis);
    242         return isLogin;
    243     }
    244     public static boolean isOnline(String uid,String sid){
    245         Jedis jedis = RedisPoolUtils.getJedis();
    246         String loginSid = jedis.get(UID_PREFIX+uid);
    247         RedisPoolUtils.release(jedis);
    248         return sid.equals(loginSid);
    249     }
    250 }

      由于在线状态是记录在Redis中的,并不单纯依靠Session的过期机制来实现,所以需要通过拦截器在每次发送请求的时候去更新Redis中相应的缓存过期时间来更新用户的在线状态。

    登陆、退出操作与单机版相似,强制下线需要配合拦截器实现,当用户下次访问的时候,自己来校验自己的状态是否为已经下线,不再由服务器控制。

    配合拦截器实现在线状态维持与强制登陆(使其他地方登陆了该账户的用户下线)功能:

     1   ...
     2     if(uid != null){//已登录
     3         if(!OnlineUtils.isOnline(uid, session.getId())){
     4             session.invalidate();
     5             return ai.invoke();
     6         }else{
     7             OnlineUtils.login(session.getId(), (ClientUser)session.getAttribute("clientUser"));
     8             //刷新缓存
     9         }
    10     }
    11     ...

    注:Redis在线列表工具类中的部分代码是后来需要实现限制同时访问指定页面浏览人数功能而添加的,同样基于Redis实现,前端由Ajax轮询来更新用户停留页面的状态。

    附录:

    Redis连接池配置文件:

    ###redis##config########
    #redis服务器ip # 
    #redis.ip=localhost
    #redis服务器端口号#
    redis.port=6379
    ###jedis##pool##config###
    #jedis的最大分配对象#
    jedis.pool.maxActive=1024
    #jedis最大保存idel状态对象数 #
    jedis.pool.maxIdle=200
    #jedis池没有对象返回时,最大等待时间 #
    jedis.pool.maxWait=1000
    #jedis调用borrowObject方法时,是否进行有效检查#
    jedis.pool.testOnBorrow=true
    #jedis调用returnObject方法时,是否进行有效检查 #
    jedis.pool.testOnReturn=true
  • 相关阅读:
    大数据离线分析平台 JavaSDK数据收集引擎编写
    大数据离线分析平台 需求分析(三)
    大数据离线分析平台 需求分析(二)
    大数据离线分析平台 需求分析(一)
    Hive 严格模式与非严格模式
    MapReduce案例:统计共同好友+订单表多表合并+求每个订单中最贵的商品
    Hadoop 目录分析及存储机制
    zookeeper 启动显示started,jps查看进程却没有,解决方法
    Azkaban介绍+安装部署+实战案例
    Flume 高可用配置案例+load balance负载均衡+ 案例:日志的采集及汇总
  • 原文地址:https://www.cnblogs.com/libaoting/p/4106390.html
Copyright © 2020-2023  润新知