• 怎样在Redis通过StackExchange.Redis 存储集合类型List


    StackExchange 是由StackOverFlow出品, 是对Redis的.NET封装,被越来越多的.NET开发者使用在项目中。
    绝大部分原先使用ServiceStack的开发者逐渐都转了过来,由于SS在其新版中不再开源,并对免费版本有所限制。

    实际问题

    那么用.NET的开发者会发现,其根本没有对List类型的存储封装,那么要实现一个类似如下需求:
    假如我有一个Customer的模型。

        public class Customer
        {
            public string FirstName { get; set; }
            public string LastName { get; set; }
            public string Address1 { get; set; }
            public string City { get; set; }
            public string State { get; set; }
        }
    var customers = new List<Customer>();

    怎样将List<customer> customers 存入Redis中呢?

    来龙去脉

    是由于StackExchange.Redis是一个纯客户端的代理,他仅仅实现了Redis自由的功能,并不额外封装其它功能。 也不具备像ORM那样的自动类型匹配。

    他仅仅存储键值对 像string 或者 byte[]。所以你明白了吧,必须序列化存储,用类似Json格式一样。像用第三方NewtonSoft或者是Google公司流行的Protocol Buffers 序列化格式的Protobuf-Net 也是不错的选择。 

    Redis支持存储的类型有五种String ,Hash ,List ,Set ,和 Sorted Set, 正如上面说的,这些存储类型全部由字符串构成。

    其中Set类型是没有顺序的,并且值必须唯一, List类型有顺序且允许重复。

    解决方案

    如果你仅仅为了缓存存一批量的 List<Customer> 数据, 那么自己封装一个ListGet() 和 ListSet()方法吧。

    我对比过使用 List 和 String 两种类型存储。

    Redis 的List类型和 .NET领域还有所不同,实际上,它是一个双向队列,可以左右插入值。

    所以如果是批量数据插入 那么必须一个个插入, 代码比较简单如下:

    //封装的ListSet
    public void ListSet<T>(string key, List<T> value)
    {
            .....
           //下面的database 是redis的数据库对象.
            foreach (var single in value)
            {
                    var s = ConvertJson(single); //序列化
                    database.ListRightPush(key, s); //要一个个的插入
            }
    }
    //封装的ListGet public void ListGet<T>(string key) { ... //ListRange返回的是一组字符串对象 //需要逐个反序列化成实体 var vList = database.ListRange(key) ; List<T> result = new List<T>(); foreach (var item in vList) { var model = ConvertObj<T>(item); //反序列化 result.Add(model); } return result; }

    当然测试了一下性能,取20W条数据平均时间 

    测试效果如下:

    获取10000条数据,平均时间大概793.78毫秒.

    当然也必须试一下String 方式的类型存储啦,代码如下:

       /// <summary>
       /// 存储List
       /// </summary>
       /// <typeparam name="T"></typeparam>
       /// <param name="key"></param>
       /// <param name="value"></param>
       public void ListSet<T>(string key, List<T> value)
       { 
           db.StringSet(key, ConvertJson(value));
       }
       /// <summary>
       /// 获取指定key的List
       /// </summary>
       /// <param name="key"></param>
       /// <returns></returns>
       public List<T> ListGet<T>(string key)
       { 
           return ConvetList<T>(db.StringGet(key));
       }

    哇! 结果惊呆了有没有。

    使用String方式 比List方式快至少20倍。

    看来不同的方式性能差别还挺大的。

    String是一次性序列化一次性的反序列化,这其中比List少了逐个插入和获取反序列化的过程。所以作为整体存取还是一个不错的方式。

    至于其余类型的方式,大家也可以去试试。

     

  • 相关阅读:
    gerapy+scrapyd组合管理分布式爬虫
    selenium之chromedriver与谷歌浏览器映射,到谷歌71.0版本的
    windows10下成功安装docker splash及遇到问题的解决方案
    python安装win32api pywin32 后出现 ImportError: DLL load failed
    git客户端安装
    linux相关命令
    springboot集成swagger2
    git远程分支创建,本地分支关联远程分支,第一次发布、更新分支
    spring事件监听机制
    JavaScript页面被卷去的头部兼容性解决方案
  • 原文地址:https://www.cnblogs.com/mcxie/p/6223931.html
Copyright © 2020-2023  润新知