• sql中in和exists的原理及使用场景。


    在我们的工作中可能会遇到这样的情形:

    我们需要查询a表里面的数据,但是要以b表作为约束。

    举个例子,比如我们需要查询订单表中的数据,但是要以用户表为约束,也就是查询出来的订单的user_id要在用户表里面存在才返回。

    表结构和表数据如下:

    table1 usertb;
    +-------+-------------+------+-----+---------+----------------+
    | Field | Type | Null | Key | Default | Extra |
    +-------+-------------+------+-----+---------+----------------+
    | id | int(11) | NO | PRI | NULL | auto_increment |
    | name | varchar(30) | YES | | NULL | |
    +-------+-------------+------+-----+---------+----------------+
    +----+-----------+
    | id | name |
    +----+-----------+
    | 1 | panchao |
    | 2 | tangping |
    | 3 | yinkaiyue |
    +----+-----------+


    table2 ordertb;
    +------------+-------------+------+-----+---------+----------------+
    | Field | Type | Null | Key | Default | Extra |
    +------------+-------------+------+-----+---------+----------------+
    | id | int(11) | NO | PRI | NULL | auto_increment |
    | user_id | int(11) | YES | | NULL | |
    | order_name | varchar(50) | YES | | NULL | |
    +------------+-------------+------+-----+---------+----------------+
    +----+---------+-------------------+
    | id | user_id | order_name |
    +----+---------+-------------------+
    | 1 | 1 | tangping's order |
    | 2 | 2 | yinkaiyue's order |
    | 3 | 0 | zhangtian's order |
    +----+---------+-------------------+

     

    看过表过后,大家在脑海中可能已经想出了很多方法了,对吧。

    主要三种方法:left join、in、exists。

    我们分别来看看。他们的查询结果和explain的结果。

    1、left join:

    MariaDB [test]> select * from ordertb a left join usertb b on a.user_id = b.id;
    +----+---------+-------------------+------+----------+
    | id | user_id | order_name | id | name |
    +----+---------+-------------------+------+----------+
    | 1 | 1 | tangping's order | 1 | panchao |
    | 2 | 2 | yinkaiyue's order | 2 | tangping |
    | 3 | 0 | zhangtian's order | NULL | NULL |
    +----+---------+-------------------+------+----------+
    MariaDB [test]> explain select * from ordertb a left join usertb b on a.user_id= b.id;
    +------+-------------+-------+--------+---------------+---------+---------+----------------+------+-------------+
    | id | select_type | table | type | possible_keys | key      | key_len | ref      | rows | Extra |
    +------+-------------+-------+--------+---------------+---------+---------+----------------+------+-------------+
    | 1  | SIMPLE      | a      | ALL  | NULL               | NULL   | NULL    | NULL | 3      |          |
    | 1 | SIMPLE | b | eq_ref | PRIMARY | PRIMARY | 4 | test.a.user_id | 1 | Using where |
    +------+-------------+-------+--------+---------------+---------+---------+----------------+------+-------------+

    2、in:

    MariaDB [test]> select * from ordertb where ordertb.user_id in (select id from usertb);
    +----+---------+-------------------+
    | id | user_id | order_name |
    +----+---------+-------------------+
    | 1 | 1 | tangping's order |
    | 2 | 2 | yinkaiyue's order |
    +----+---------+-------------------+
    MariaDB [test]> explain select * from ordertb where ordertb.user_id in (select id from usertb);
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+
    | id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+
    | 1 | PRIMARY | ordertb | ALL | NULL | NULL | NULL | NULL | 3 | Using where |
    | 1 | PRIMARY | usertb | eq_ref | PRIMARY | PRIMARY | 4 | test.ordertb.user_id | 1 | Using index |
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+

    3、exists:

    MariaDB [test]> select * from ordertb where exists(select 1 from usertb where usertb.id = ordertb.user_id);
    +----+---------+-------------------+
    | id | user_id | order_name |
    +----+---------+-------------------+
    | 1 | 1 | tangping's order |
    | 2 | 2 | yinkaiyue's order |
    +----+---------+-------------------+
    MariaDB [test]> explain select * from ordertb where exists(select 1 from usertbwhere usertb.id = ordertb.user_id);
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+
    | id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+
    | 1 | PRIMARY | ordertb | ALL | NULL | NULL | NULL | NULL | 3 | Using where |
    | 1 | PRIMARY | usertb | eq_ref | PRIMARY | PRIMARY | 4 | test.ordertb.user_id | 1 | Using index |
    +------+-------------+---------+--------+---------------+---------+---------+----------------------+------+-------------+

    我们可以看到,这三种查询的explain结果大致相同,唯一不同的是left join中的Extra没有用到Useing Where。说明left join相比于其他两个查询效率要低一些,并且left join中有冗余数据。

    我们再来看 in 和 exists ,从表面上来看好像xiaolv一样。其实不然。我们来深入分析一下这两个语句。

    1、in。

    其中usertb我们用B来代替,ordertb我们用A来代替。

    in()只执行一次,它查出B表中的所有id字段并缓存起来.之后,检查A表的user_id是否与B表中的id相等,如果相等则将A表的记录加入结果集中,直到遍历完A表的所有记录. 它的查询过程类似于以下过程

    List resultSet=[]; Array A=(select * from A); Array B=(select id from B);
    for(int i=0;i<A.length;i++) {    for(int j=0;j<B.length;j++) {       if(A[i].id==B[j].id) {          resultSet.add(A[i]);          break;       }    } } return resultSet;

    可以看出,当B表数据较大时不适合使用in(),因为它会B表数据全部遍历一次. 如:A表有10000条记录,B表有1000000条记录,那么最多有可能遍历10000*1000000次,效率很差. 再如:A表有10000条记录,B表有100条记录,那么最多有可能遍历10000*100次,遍历次数大大减少,效率大大提升.

    2、exists。

    exists()会执行A.length次,它并不缓存exists()结果集,因为exists()结果集的内容并不重要,重要的是结果集中是否有记录,如果有则返回true,没有则返回false. 它的查询过程类似于以下过程

    List resultSet=[]; Array A=(select * from A)
    for(int i=0;i<A.length;i++) {    if(exists(A[i].id) {    //执行select 1 from B b where b.id=a.id是否有记录返回        resultSet.add(A[i]);    } } return resultSet;

    当B表比A表数据大时适合使用exists(),因为它没有那么遍历操作,只需要再执行一次查询就行. 如:A表有10000条记录,B表有1000000条记录,那么exists()会执行10000次去判断A表中的id是否与B表中的id相等. 如:A表有10000条记录,B表有100000000条记录,那么exists()还是执行10000次,因为它只执行A.length次,可见B表数据越多,越适合exists()发挥效果. 再如:A表有10000条记录,B表有100条记录,那么exists()还是执行10000次,还不如使用in()遍历10000*100次,因为in()是在内存里遍历比较,而exists()需要查询数据库,我们都知道查询数据库所消耗的性能更高,而内存比较很快.

    结论:exists()适合B表比A表数据大的情况

    当A表数据与B表数据一样大时,in与exists效率差不多,可任选一个使用.

    区别及应用场景

    in 和 exists的区别:

    如果子查询得出的结果集记录较少,主查询中的表较大且又有索引时应该用in, 反之如果外层的主查询记录较少,子查询中的表大,又有索引时使用exists。其实我们区分in和exists主要是造成了驱动顺序的改变(这是性能变化的关键),如果是exists,那么以外层表为驱动表,先被访问,如果是IN,那么先执行子查询,所以我们会以驱动表的快速返回为目标,那么就会考虑到索引及结果集的关系了 ,另外IN时不对NULL进行处理。

    in 是把外表和内表作hash 连接,而exists是对外表作loop循环,每次loop循环再对内表进行查询。一直以来认为exists比in效率高的说法是不准确的。

    更多细节,可以参考以下博客(SQL语句中exists和in的区别),因为我也是看了这个博客写的文章。

  • 相关阅读:
    rabbitmq
    mysql
    redis
    vue整理
    crawlspider和中间件
    日志等级与请求传参
    Scrapy框架初级篇
    验证码操作
    图片懒加载、selenium&phantomjs
    《信息安全系统设计基础》 第二周学习总结
  • 原文地址:https://www.cnblogs.com/573734817pc/p/11057677.html
Copyright © 2020-2023  润新知