• SQL学习之索引(转)


    原文出自http://www.cnblogs.com/CareySon/archive/2011/12/22/2297568.html

    简介


         

        在SQL Server中,索引是一种增强式的存在,这意味着,即使没有索引,SQL Server仍然可以实现应有的功能。但索引可以在大多数情况下大大提升查询性能,在OLAP中尤其明显.要完全理解索引的概念,需要了解大量原理性的知 识,包括B树,堆,数据库页,区,填充因子,碎片,文件组等等一系列相关知识,这些知识写一本小书也不为过。所以本文并不会深入讨论这些主题。

    索引是什么


        索引是对数据库表中一列或多列的值进行排序的一种结构,使用索引可快速访问数据库表中的特定信息。

        精简来说,索引是一种结构.在SQL Server中,索引和表(这里指的是加了聚集索引的表)的存储结构是一样的,都是B树,B树是一种用于查找的平衡多叉树.理解B树的概念如下图:

        B-

        理解为什么使用B树作为索引和表(有聚集索引)的结构,首先需要理解SQL Server存储数据的原理.

        在SQL SERVER中,存储的单位最小是页(PAGE),页是不可再分的。就像细胞是生物学中不可再分的,或是原子是化学中不可再分的最小单位一样.这意味着,SQL SERVER对于页的读取,要么整个读取,要么完全不读取,没有折中.

        在数据库检索来说,对于磁盘IO扫描是最消耗时间的.因为磁盘扫描涉及很多物理特性,这些是相当消耗时间的。所以B树设计的初衷是为了减少对于磁盘的扫描 次数。如果一个表或索引没有使用B树(对于没有聚集索引的表是使用堆heap存储),那么查找一个数据,需要在整个表包含的数据库页中全盘扫描。这无疑会 大大加重IO负担.而在SQL SERVER中使用B树进行存储,则仅仅需要将B树的根节点存入内存,经过几次查找后就可以找到存放所需数据的被叶子节点包含的页!进而避免的全盘扫描从 而提高了性能.

        下面,通过一个例子来证明:

         在SQL SERVER中,表上如果没有建立聚集索引,则是按照堆(HEAP)存放的,假设我有这样一张表:

         1

         现在这张表上没有任何索引,也就是以堆存放,我通过在其上加上聚集索引(以B树存放)来展现对IO的减少:

         2

    理解聚集和聚集索引


        在SQL SERVER中,最主要的两类索引是聚集索引和非聚集索引。可以看到,这两个分类是围绕聚集这个关键字进行的.那么首先要理解什么是聚集.

        聚集在索引中的定义:

        为了提高某个属性(或属性组)的查询速度,把这个或这些属性(称为聚集码)上具有相同值的元组集中存放在连续的物理块称为聚集。

        简单来说,聚集索引就是:

        3

        在SQL SERVER中,聚集的作用就是将某一列(或是多列)的物理顺序改变为和逻辑顺序相一致,比如,我从adventureworks数据库的employee中抽取5条数据:

        4

        当我在ContactID上建立聚集索引时,再次查询:

        5

        在SQL SERVER中,聚集索引的存储是以B树存储,B树的叶子直接存储聚集索引的数据:

        grid.ai

        因为聚集索引改变的是其所在表的物理存储顺序,所以每个表只能有一个聚集索引.

    非聚集索引

         因为每个表只能有一个聚集索引,如果我们对一个表的查询不仅仅限于在聚集索引上的字段。我们又对聚集索引列之外还有索引的要求,那么就需要非聚集索引了.

         非聚集索引,本质上来说也是聚集索引的一种.非聚集索引并不改变其所在表的物理结构,而是额外生成一个聚集索引的B树结构,但叶子节点是对于其所在表的引 用,这个引用分为两种,如果其所在表上没有聚集索引,则引用行号。如果其所在表上已经有了聚集索引,则引用聚集索引的页.

         一个简单的非聚集索引概念如下:

         6

         可以看到,非聚集索引需要额外的空间进行存储,按照被索引列进行聚集索引,并在B树的叶子节点包含指向非聚集索引所在表的指针.

         MSDN中,对于非聚集索引描述图是:

         grid.ai

         可以看到,非聚集索引也是一个B树结构,与聚集索引不同的是,B树的叶子节点存的是指向堆或聚集索引的指针.

         通过非聚集索引的原理可以看出,如果其所在表的物理结构改变后,比如加上或是删除聚集索引,那么所有非聚集索引都需要被重建,这个对于性能的损耗是相当大的。所以最好要先建立聚集索引,再建立对应的非聚集索引.

    聚集索引 VS 非聚集索引


          前面通过对于聚集索引和非聚集索引的原理解释.我们不难发现,大多数情况下,聚集索引的速度比非聚集索引要略快一些.因为聚集索引的B树叶子节点直接存储数据,而非聚集索引还需要额外通过叶子节点的指针找到数据.

          还有,对于大量连续数据查找,非聚集索引十分乏力,因为非聚集索引需要在非聚集索引的B树中找到每一行的指针,再去其所在表上找数据,性能因此会大打折扣.有时甚至不如不加非聚集索引.

          因此,大多数情况下聚集索引都要快于非聚集索引。但聚集索引只能有一个,因此选对聚集索引所施加的列对于查询性能提升至关紧要.

    索引的使用


         索引的使用并不需要显式使用,建立索引后查询分析器会自动找出最短路径使用索引.

         但是有这种情况.当随着数据量的增长,产生了索引碎片后,很多存储的数据进行了不适当的跨页,会造成碎片(关于跨页和碎片以及填充因子的介绍,我会在后续文章中说到)我们需要重新建立索引以加快性能:

         比如前面的test_tb2上建立的一个聚集索引和非聚集索引,可以通过DMV语句查询其索引的情况:

    SELECT index_type_desc,alloc_unit_type_desc,avg_fragmentation_in_percent,fragment_count,avg_fragment_size_in_pages,page_count,record_count,avg_page_space_used_in_percent
    FROM sys.dm_db_index_physical_stats(DB_ID('AdventureWorks'),OBJECT_ID('test_tb2'),NULL,NULL,'Sampled')

         7

        我们可以通过重建索引来提高速度:

    ALTER INDEX idx_text_tb2_EmployeeID ON test_tb2 REBUILD

        还有一种情况是,当随着表数据量的增大,有时候需要更新表上的统计信息,让查询分析器根据这些信息选择路径,使用:

       那么什么时候知道需要更新这些统计信息呢,就是当执行计划中估计行数和实际表的行数有出入时:

       8

      

    使用索引的代价


        我最喜欢的一句话是”everything has price”。我们通过索引获得的任何性能提升并不是不需要付出代价。这个代价来自几方面.

        1.通过聚集索引的原理我们知道,当表建立索引后,就以B树来存储数据.所以当对其进行更新插入删除时,就需要页在物理上的移动以调整B树.因此当更新插 入删除数据时,会带来性能的下降。而对于非聚集索引,当更新表后,非聚集索引也需要进行更新,相当于多更新了N(N=非聚集索引数量)个表。因此也下降了 性能.

        2.通过上面对非聚集索引原理的介绍,可以看到,非聚集索引需要额外的磁盘空间。

        3.前文提过,不恰当的非聚集索引反而会降低性能.

        所以使用索引需要根据实际情况进行权衡.通常我都会将非聚集索引全部放到另外一个独立硬盘上,这样可以分散IO,从而使查询并行.

     

    总结


         本文从索引的原理和概念对SQL SERVER中索引进行介绍,索引是一个很强大的工具,也是一把双刃剑.对于恰当使用索引需要对索引的原理以及数据库存储的相关原理进行系统的学习.

    =================================================

    SQL Server 索引和视图

    原文地址 http://www.cnblogs.com/hoojo/archive/2011/07/18/2109291.html

    Ø 索引

        1、 什么是索引

            索引就是数据表中数据和相应的存储位置的列表,利用索引可以提高在表或视图中的查找数据的速度。

        2、 索引分类

            数据库中索引主要分为两类:聚集索引和非聚集索引。SQL Server 2005还提供了唯一索引、索引视图、全文索引、xml索引等等。聚集索引和非聚集索引是数据库引擎中索引的基本类型,是理解其他类型索引的基础。

        # 聚集索引

            聚集索引是值表中数据行的物理存储顺序和索引的存储顺序完全相同。聚集索引根据索引顺序物理地重新排列了用户插入到表中的数据,因此,每个表只能创建一个 聚集索引。聚集索引经常创建在表中经常被搜索到的列或按顺序访问的列上。在默认情况下,主键约束自动创建聚集索引。

        # 非聚集索引

            非聚集索引不改变表中数据列的物理存储位置,数据与索引分开存储,通过索引指向的地址与表中的数据发生关系。

            非聚集索引没有改变表中物理行的位置,索引可以在以下情况下使用非聚集索引:

            一、如果某个字段的数据唯一性比较高

            二、如果查询所得到的数据量比较少

    聚集索引和非聚集索引的区别:

    聚集索引

    非聚集索引

    每个表只允许创建一个聚集索引

    最多可以有249个非聚集索引

    物理的重排表中的数据以符合索引约束

    创建一个键值列表,键值指向数据在数据页中的位置

    用于经常查找数据的列

    用于从表中查找单个值的列

        # 其他类型索引

        除了以上索引,还有以下类型索引:

            a、 唯一索引:如果希望索引键都不同,可以创建唯一索引。聚集索引和非聚集索引都可以是唯一索引。

            b、 包含新列索引:索引列的最大数量是16个,索引列的字节总数的最高值是900。如果当多个列的字节总数大于900,切又想在这些劣种都包含索引是,可以使用包含性列索引

            c、 视图索引:提供视图查询效率,可以视图的索引物理化,也就是说将结果集永久存储在索引中,可以创建视图索引。

            d、 XML索引:是与xml数据关联的索引形式,是XML二进制blob的已拆分持久表示形式

            e、 全文索引:一种特殊类型的基于标记的功能性功能,用于帮助在字符串中搜索赋值的词

       

        3、 创建索引

        语法

    create [unique] [clustered | noclustered]
    index index_name
    on table_name (column_name ...)
    [with fillfactor=x]

        unique唯一索引

        clustered聚集索引

        noclustered非聚集索引

        fillfactor填充因子大小,范围在0-100直接,表示索引页填满的空间所占的百分比。

        示例

    if (exists (select * from sys.indexes where name = 'idx_stu_name'))
        drop index student.idx_stu_name
    go
    create index idx_stu_name
    on
    student(name);
     
    --联合索引
    if (exists (select * from sys.indexes where name = 'idx_uqe_clu_stu_name_age'))
        drop index student.idx_uqe_clu_stu_name_age
    go
    create unique clustered index idx_uqe_clu_stu_name_age
    on student(name, age);
     
    if (exists (select * from sys.indexes where name = 'idx_cid'))
        drop index student.idx_cid
    go
     
    if (exists (select * from sys.indexes where name = 'idx_cid'))
        drop index student.idx_cid
    go
     
    --非聚集索引
    create nonclustered index idx_cid
    on
    student (cid)
    with fillFactor = 30;    --填充因子
     
    --聚集索引
    if (exists (select * from sys.indexes where name = 'idx_sex'))
        drop index student.idx_sex
    go
    create clustered index idx_sex
    on
    student(sex);
     
    --聚集索引
    if (exists (select * from sys.indexes where name = 'idx_name'))
        drop index student.idx_name
    go
    create unique index idx_name
    on
    student(name);

       

        4、 适合的创建索引的列

            当数据库的某一列被频繁的用于数据库查询时,或者该列用于数据库进行排序时可以创建成索引

        5、 不适合创建索引的列

            如果列中有几个不同的值,或者表中仅包含几行值,则不推荐为其创建索引。因为索引在搜索数据所花的时间比在表中逐行搜索话的时间更长。

    Ø 视图

        1、 什么是视图

            视图就是一个虚拟的数据表,该数据表中的数据记录是有一条查询语句的查询结果得到的。

        2、 创建视图准则

            创建视图需要考虑一下准则:

        # 视图名称必须遵循标识符的规则,该名称不得与该架构的如何表的名称相同

        # 你可以对其他视图创建视图。允许嵌套视图,但嵌套不得超过32层。视图最多可以有1024个字段

        # 不能将规则和default定义于视图相关联

        # 视图的查询不能包含compute子句、compute by子句或into关键字

        # 定义视图的查询不能包含order by子句,除非在select 语句的选择列表中还有top子句

       

        下列情况必须指定视图中每列的名称:

        # 视图中的如何列都是从算术表达式、内置函数或常量派生而来

        # 视图中有两列或多列具有相同名称(通常由于视图定义包含联接,因此来自两个或多个不同的列具有相同的名称)

        # 希望视图中的列指定一个与其原列不同的名称(也可以在视图中重命名列)。无论是否重命名,视图列都回继承原列的数据类型

        3、 创建视图

    --创建视图
    if (exists (select * from sys.objects where name = 'v_stu'))
        drop view v_stu
    go
    create view v_stu
    as
    select id, name, age, sex from student;

       

        4、 修改视图

    alter view v_stu
    as
    select id, name, sex from student;
     
    alter view v_stu(编号, 名称, 性别)
    as
        select id, name, sex from student
    go
    select * from v_stu;
     
    select * from information_schema.views;

       

        5、 加密视图

    --加密视图
    if (exists (select * from sys.objects where name = 'v_student_info'))
        drop view v_student_info
    go
    create view v_student_info
    with encryption --加密
    as
        select id, name, age from student
    go
    --view_definition is null
    select * from information_schema.views 
    where table_name like 'v_stu';
  • 相关阅读:
    中文词频统计
    复合数据类型,英文词频统计
    hadoop 综合大作业
    分布式并行计算MapReduce
    分布式文件系统HDFS 练习
    安装关系型数据库MySQL 安装大数据处理框架Hadoop
    爬虫综合大作业
    爬取全部的校园新闻
    获取一篇新闻的全部信息
    理解爬虫原理
  • 原文地址:https://www.cnblogs.com/aqbyygyyga/p/2364693.html
Copyright © 2020-2023  润新知