• .NET进阶篇-Linq、Lambda表达式


    知识需要不断积累、总结和沉淀,思考和写作是成长的催化剂

    内容目录

    一、Lambda表达式1、匿名方法2、Lambda表达式二、Linq概述三、查询操作符1、linq初见2、常用查询操作符筛选排序分组连接合并分页聚合转换四、并行Linq五、表达式树1、认识表达式目录树2、拼装表达式树3、应用六、小结

    一、Lambda表达式

    1、匿名方法

    使用delegate的时候很多时候没必要使用一个普通方法,因为这个方法只有delegate会用,并且只用一次,这时候使用匿名方法最合适。
    匿名方法就是没有名字的方法。示例中就是用一个匿名方法创建委托实例,我们无需在写一个具名方法给委托,使代码更简洁和可读。匿名方法也是在调用时执行,在myDele(1,"test")处调用。(用反编译器看一下还是会生成一个具名方法的,只不过在编译器内部使用)。

    delegate bool MyDelegate(int i, string s);
    MyDelegate myDele = delegate (int i, string s)
    {
        Console.WriteLine($"我是匿名方法,参数值{i}{s}");
        return true;
    };
    bool b = myDele(1"test");

    2、Lambda表达式

    函数式编程,在C#3.0开始,我们有了Lambda表达式代替匿名方法,它比匿名方法更加简单。Lambda运算符“=>”(发音goesto)的左边列出了需要的参数,右边是利用该参数方法的实现代码。

    Action<string> a1 = delegate (string s) { Console.WriteLine(s); };
    a1("匿名方法");
    Action<string> a2 =  (string s)=> { Console.WriteLine(s); };
    a1("Lambda表达式");
    Action<string> a3 = s => { Console.WriteLine(s); };
    a3("Lambda表达式,有一个参数的可以简写不要小括号,参数类型会自动推断");
    Action<string> a4 = s =>  Console.WriteLine(s);
    a4("Lambda表达式,方法体只有一行,连花括号也可以省略");

    另一点,通过Lambda表达式可以访问Lambda表达式块外部的变量。这是一个非常好的功能,但如果未正确使用,也会非常危险。

    int sommVal = 5;
    Func<intint> f = x => x + sommVal;

    sommVal = 7;
    Console.WriteLine(f(3));

    如果外部修改了sommVol值就会影响Lambda表达式的输出,特别是在多线程中,可能无法确定当前的sommVal值。
    Lambad表达式内部是如何使用外部的变量呢?首先编译器会创建一个匿名类,然后将使用到的外部变量当做匿名类的构造函数的参数,当调用时候,就创建匿名类的一个实例,并传递调用该方法时外部变量的值。

    二、Linq概述

    Linq(language integrated query)语言集成查询集成了C#编程语言中的查询语法,使之可以使用相同的语法访问不同的数据源
    根据数据源的不同,Linq可分为linq to object,linq to sql,linq to xml,你也可以扩展linq to excel,to everything。为不同的数据源提供相同的查询接口即可。

    三、查询操作符

    1、linq初见

    现在我们有如下实体的集合

    public class Student
    {
        public int Id { getset; }
        public int ClassId { getset; }
        public string Name { getset; }
        public int Age { getset; }
    }
    List<Student> studentLst = new List<Student>();

    假设studentLst里已经有一些数据,然后需要查询出年纪小于25的学生。有很多方法,可以循环列表挑出age<25的学生,可以使用List的FindAll,Where等方法,看起来像下面这样(注意只有在访问list中数据时,才会去执行过滤条件查询,延迟查询)

    var list = studentLst.Where<Student>(s => s.Age < 25); 
    foreach (var item in list)
    {
        Console.WriteLine("Name={0}  Age={1}", item.Name, item.Age);
    }

    where扩展方法的内部逻辑大概像这样,foreach循环调用过滤的委托方法,yield关键字语法糖包装了一些复杂行为,包括会初始化一个IEnumerable类,然后给添加内容。

    public static IEnumerable<T> Where<T>(this IEnumerable<T> source, Func<T, bool> func)
    {
        if (source == null)
        {
            throw new Exception("source is null");
        }
        if (func == null)
        {
            throw new Exception("func is null");
        }

        foreach (var item in source)
        {
            if (func.Invoke(item))
            {
                yield return item;
            }
        }
    }

    那么用Linq如何查询呢?

    var list = from s in studentList
               where s.Age < 25
               select s;

    foreach (var item in list)
    {
        Console.WriteLine("Name={0}  Age={1}", item.Name, item.Age);
    }

    From、where、select都是预定义的关键字,查询表达式必须以from开头,以select或group子句结束,中间可以使用where、orderby、join等。from子句引入数据源studentList和范围变量s,s就像foreach循环中的迭代变量。
    同样的,在运行期间定义查询表达式时,查询不会立即运行,在迭代数据项时运行。

    2、常用查询操作符

    筛选

    最常见的查询操作就是以布尔表达式的形式应用筛选器。通过where子句筛选表达式为true的结果

    var list = from s in studentList
               where s.Age < 25 && s.ClassId==1
               select s;
    排序

    Orderby子句根据要排序类型的默认比较器,对返回序列中的元素进行排序

    var list = from s in studentList
               where s.Age < 25
               orderby s.Name ascending
               select s;

    和list的以下方法类似,就是把关键字解析为方法,随着查询越来越复杂,linq这种类似sql语句就表现的更加简洁直观

    var list = studentList.Where(s => s.Age < 25).OrderByDescending(s => s.Name).Select(s => s);
    分组

    group 子句用于对根据您指定的键所获得的结果进行分组。示例中into关键字创建进一步查询的标识,用select子句创建了一个带key和maxAge属性的匿名类型,返回每个班级中年龄小于25岁的最大年龄。

    var list = from s in studentList
               where s.Age < 25
               group s by s.ClassId into sg
               select new
               {
                   key = sg.Key,
                   maxAge = sg.Max(t => t.Age)
               };
    foreach (var item in list)
    {
        Console.WriteLine($"key={item.key}  maxAge={item.maxAge}");
    }
    连接

    使用join子句可以根据特性的条件合并两个数据源。例如通过连接查询选择相同课程的学生

    List<Class> classList = new List<Class>(){
            new Class()
            {
                Id=1,
                ClassName="高数"
            },
            new Class()
            {
                Id=2,
                ClassName="毛概"
            }
    };
    var list = from s in studentList
               join c in classList on s.ClassId equals c.Id
               select new
               {
                   Name = s.Name,
                   CalssName = c.ClassName
               };
    foreach (var item in list)
    {
        Console.WriteLine($"Name={item.Name},CalssName={item.CalssName}");
    }
    合并

    zip方法是.NET4新增的,允许用一个函数把两个序列合并为一个。第一个集合中的第一项会与第二个集合中的第一项合并,第一个集合中的第二项与第二个集合中的第二项合并,以此类推。如果两个集合的项目不同,zip方法就在到达较小集合的末尾时停止

    var list = from s in studentList
               where s.Age < 25
               select s;
    var list2 = from s in studentList
                where s.Age < 25
                select s;
    var lst = list.Zip(list2, (first, second) => first.Name + "," + second.Name);
    分页

    扩展方法Take()和Skip()等的分区操作用于分页。使用时把扩展方法take、skip添加到查询的最后,skip方法会忽略根据页面大小和实际页数计算出的项数,再使用take方法根据页面大小提取一定数量的项

    int pageSize = 5;
    int pageIdx = 0;
    var list = (from s in studentList
                where s.Age < 25
                select s).Skip(pageIdx * pageSize).Take(pageSize);
    聚合

    聚合操作符Count(),Sum(),Min(),Average()等不返回一个序列,而返回一个值。

    转换

    Linq不只是检索数据。 它也是用于转换数据的强大工具。 通过使用 LINQ 查询,可以使用源序列作为输入,并通过多种方式对其进行修改,以创建新的输出序列。 通过排序和分组,你可以修改序列本身,而无需修改这些元素本身。 但也许 LINQ 查询最强大的功能是创建新类型
    以下示例将内存中数据结构中的对象转换为 XML 元素。

    var studentsToXML = new XElement("Root",
                from student in studentList
                select new 
                XElement("student",
                        new XElement("name", student.Name),
                        new XElement("age", student.Age)
        )
    );
    Console.WriteLine(studentsToXML);

    四、并行Linq

    .NET4在System.Linq名称空间中包含了一个新类ParallelEnumerable,可以分解查询的工作使其分布在多个线程上。集合序列会分成多个部分,不同的线程处理,完成后合并。这对大集合,又是多核CPU的可以提高效率

    var list = (from s in studentList.AsParallel()
               where s.Age < 25
               select s.Age).Sum();
    var list2 = (from s in Partitioner.Create(studentList,true).AsParallel().WithDegreeOfParallelism(8)
                where s.Age < 25
                select s.Age).Sum();

    可以使用Partitioner类创建分区器,WithDegreeOfParallelism指定最大并行任务数
    并行linq往往需要较多耗时使用,那应该也有取消长时间运行的任务需求。给查询添加一个WithCancellation方法,并传递一个CancellationToken令牌作为参数。该查询在单独线程中使用,主线程中触发取消命令。

    var cts = new CancellationTokenSource();
    new Thread(()=>
        {
            try
            {
                var sum= (from s in studentList.AsParallel().WithCancellation(cts.Token)
                          where s.Age < 25
                          select s.Age).Sum();
            }
            catch (OperationCanceledException ex)
            {
                Console.WriteLine(ex.Message);
            }
        }
    ).Start();
    //外部动作触发取消
    cts.Cancel();

    五、表达式树

    1、认识表达式目录树

    出现在System.Linq.Expression中,就是为Linq to sql服务的。表达式树以树形数据结构表示代码,其中每一个节点都是一种表达式。它可以将我们原来直接由代码编写的逻辑存储在一个树状的结构里,然后运行的时候就去动态解析这个树。lambda表达式声明表达式目录树可以像下面这样。

    Func<intintint> func = (m, n) => m * n + 2;// new Func<int, int, int>((m, n) => m * n + 2);
    Expression<Func<intintint>> exp = (m, n) => m * n + 2;//lambda表达式声明表达式目录树
    //Expression<Func<int, int, int>> exp1 = (m, n) =>//只能一行 不能有大括号
    //    {
    //        return m * n + 2;
    //    };
    //Queryable    //a=>a.Id>3

    //表达式目录树:语法树,或者说是一种数据结构;可以被我们解析
    int iResult1 = func.Invoke(1223);
    int iResult2 = exp.Compile().Invoke(1223);

    2、拼装表达式树

    如果使用Expression类接口声明看起来会像下面这样,注意比较Lambda表达式声明和Expression类自己拼装声明的区别,最后都是需要Compile()编译后执行。

    Expression<Func<intintint>> exp = (m, n) => m * n + 2;
    ParameterExpression parameterExpression = Expression.Parameter(typeof(int), "m");
    ParameterExpression parameterExpression2 = Expression.Parameter(typeof(int), "n");
    var multiply = Expression.Multiply(parameterExpression, parameterExpression2);
    var constant = Expression.Constant(2typeof(int));
    var add = Expression.Add(multiply, constant);

    Expression<Func<intintint>> expression =
        Expression.Lambda<Func<intintint>>(
            add,
            new ParameterExpression[]
            {
                 parameterExpression,
                 parameterExpression2
            });

    int iResult1 = exp.Compile().Invoke(1112);
    int iResult2 = expression.Compile().Invoke(1112);

    表达式树是由表达式的主体body、表达式的参数parameters、表达式类型Type、返回类型NodeType组成。一个树可能有很多叶子节点,复杂一点的例子像下面这样

    //i*j+w*x
    ParameterExpression a = Expression.Parameter(typeof(int), "i");   //创建一个表达式树中的参数,作为一个节点,这里是最下层的节点
    ParameterExpression b = Expression.Parameter(typeof(int), "j");
    BinaryExpression r1 = Expression.Multiply(a, b);    //这里i*j,生成表达式树中的一个节点,比上面节点高一级

    ParameterExpression c = Expression.Parameter(typeof(int), "w");
    ParameterExpression d = Expression.Parameter(typeof(int), "x");
    BinaryExpression r2 = Expression.Multiply(c, d);

    BinaryExpression result = Expression.Add(r1, r2);   //运算两个中级节点,产生终结点

    Expression<Func<intintintintint>> lambda = Expression.Lambda<Func<intintintintint>>(result, a, b, c, d);

    Console.WriteLine(lambda + "");   //输出‘(i,j,w,x)=>((i*j)+(w*x))’,z对应参数b,p对应参数a

    Func<intintintintint> f = lambda.Compile();  //将表达式树描述的lambda表达式,编译为可执行代码,并生成该lambda表达式的委托;

    Console.WriteLine(f(1111) + "");  //输出结果2

    上面例子形成的表达式树就像下面这样。

    3、应用

    最常用的地方还是查询数据时。以往我们做一个查询,根据用户输入,去数据库中查询匹配的信息,可能去想到去拼一条带where条件的sql语句,然后去执行这条sql即可。
    如果无法确定需要查询的字段,当每换一个查询条件或组合多个查询条件,我们可以用表达式目录树动态的拼装起来。

    还可以用来代替反射,我们知道反射有性能问题,硬编码是最快的,但不够灵活。像泛型一样,表达式树可以动态生成硬编码,缓存后以后访问调用就相当于硬编码性能。比如示例中,我们如果需要对一个类型对象转换成另一个对象。这里可以有很多方法,硬编码、反射、序列化等都可以实现,现在我们用表达式树试一下。

    People people = new People()
    {
        Id = 11,
        Name = "Wang",
        Age = 31
    };
    PeopleCopy peopleCopy = new PeopleCopy()
    {
        Id = people.Id,
        Name = people.Name,
        Age = people.Age
    };

    硬编码像上面这样,我们用表达式目录树就是为了能够生成这种硬编码的委托

    public class ExpressionMapper
    {
        private static Dictionary<stringobject> _Dic = new Dictionary<stringobject>();

        /// <summary>
        /// 字典缓存表达式树
        /// </summary>
        /// <typeparam name="TIn"></typeparam>
        /// <typeparam name="TOut"></typeparam>
        /// <param name="tIn"></param>
        /// <returns></returns>
        public static TOut Trans<TIn, TOut>(TIn tIn)
        {
            string key = string.Format("funckey_{0}_{1}"typeof(TIn).FullName, typeof(TOut).FullName);
            if (!_Dic.ContainsKey(key))
            {
                ParameterExpression parameterExpression = Expression.Parameter(typeof(TIn), "p");
                List<MemberBinding> memberBindingList = new List<MemberBinding>();
                foreach (var item in typeof(TOut).GetProperties())
                
    {
                    MemberExpression property = Expression.Property(parameterExpression, typeof(TIn).GetProperty(item.Name));
                    MemberBinding memberBinding = Expression.Bind(item, property);
                    memberBindingList.Add(memberBinding);
                }
                foreach (var item in typeof(TOut).GetFields())
                
    {
                    MemberExpression property = Expression.Field(parameterExpression, typeof(TIn).GetField(item.Name));
                    MemberBinding memberBinding = Expression.Bind(item, property);
                    memberBindingList.Add(memberBinding);
                }
                MemberInitExpression memberInitExpression = Expression.MemberInit(Expression.New(typeof(TOut)), memberBindingList.ToArray());
                Expression<Func<TIn, TOut>> lambda = Expression.Lambda<Func<TIn, TOut>>(memberInitExpression, new ParameterExpression[]
                {
                    parameterExpression
                });
                Func<TIn, TOut> func = lambda.Compile();//拼装是一次性的
                _Dic[key] = func;
            }
            return ((Func<TIn, TOut>)_Dic[key]).Invoke(tIn);
        }
    }
    var result = ExpressionMapper.Trans<People, PeopleCopy>(people);

    表达式和表达式树什么关系呢?首先表达式是匿名方法生成委托实例,而表达式树是一种数据结构,本身不能执行的,需要编译成sql,然后解释执行表达式树中每个节点的表达式。

    六、小结

    本章认识了Lambda表达式,linq查询以及相关的常用操作符,它们不仅用于筛选数据源,给数据源排序,还用于执行分区,分组,转换,连接等操作,使用并行linq可以提高大型数据集的查询效率。另一个重要概念就是表达式目录树。表达式目录树允许在运行期间构建对数据源的查询,存储在程序集中,主要用在linq to sql中,后面学习EntityFramework框架时会用到大量的表达式目录树。

     

     

    debug everything

    愿一觉醒来,阳光正好

    而不是,一觉醒来,天都黑了

    *************转摘:https://www.cnblogs.com/xibei/p/11787730.html#h-10

     
  • 相关阅读:
    Shell 字符串处理
    Shell 变量替换及测试
    ARTS(一)
    instanceof & isAssignableFrom的异同
    mysql 分组排序取最值
    guava-retrying 源码解析(阻塞策略详解)
    guava-retrying 源码解析(时间限制策略)
    guava-retrying 源码解析(停止策略详解)
    guava-retrying 源码解析(等待策略详解)
    guava-retrying 源码解析(导入项目)
  • 原文地址:https://www.cnblogs.com/linybo/p/13186062.html
Copyright © 2020-2023  润新知