zoukankan      html  css  js  c++  java

  • 理解SQL SERVER中的分区表

     

     
    分区表是在SQL SERVER2005之后的版本引入的特性。这个特性允许把逻辑上的一个表在物理上分为很多部分。而对于SQL SERVER2005之前版本，所谓的分区表仅仅是分布式视图,也就是多个表做union操作.

        分区表在逻辑上是一个表，而物理上是多个表.这意味着从用户的角度来看，分区表和普通表是一样的。这个概念可以简单如下图所示：

        1

         而对于SQL SERVER2005之前的版本，是没有分区这个概念的，所谓的分区仅仅是分布式视图:

         3

         本篇文章所讲述的分区表指的是SQL SERVER2005之后引入的分区表特性.

    为什么要对表进行分区

         在回答标题的问题之前，需要说明的是，表分区这个特性只有在企业版或者开发版中才有,还有理解表分区的概念还需要理解SQL SERVER中文件和文件组的概念.

         对表进行分区在多种场景下都需要被用到.通常来说，使用表分区最主要是用于:

    •      存档，比如将销售记录中1年前的数据分到一个专门存档的服务器中
    •      便于管理，比如把一个大表分成若干个小表，则备份和恢复的时候不再需要备份整个表，可以单独备份分区
    •      提高可用性，当一个分区跪了以后，只有一个分区不可用，其它分区不受影响
    •      提高性能，这个往往是大多数人分区的目的，把一个表分布到不同的硬盘或其他存储介质中，会大大提升查询的速度.

    分区表的步骤

        分区表的定义大体上分为三个步骤：

    1.     定义分区函数
    2.     定义分区构架
    3.     定义分区表

        分区函数，分区构架和分区表的关系如下：

        2

        分区表依赖分区构架，而分区构架又依赖分区函数.值得注意的是，分区函数并不属于具体的分区构架和分区表，他们之间的关系仅仅是使用关系.

        下面我们通过一个例子来看如何定义一个分区表:

         假设我们需要定义的分区表结构如下:

         4

         第一列为自增列，orderid为订单id列，SalesDate为订单日期列，也就是我们需要分区的依据.

         下面我们按照上面所说的三个步骤来实现分区表.

    定义分区函数

        分区函数是用于判定数据行该属于哪个分区,通过分区函数中设置边界值来使得根据行中特定列的值来确定其分区，上面例子中，我们可以通过SalesDate的值来判定其不同的分区.假设我们想定义两个边界值(boundaryValue)进行分区,则会生成三个分区,这里我设置边界值分别为2004-01-01和2007-01-01，则前面例子中的表会根据这两个边界值分成三个区:

        5

        在MSDN中，定义分区函数的原型如下:

    CREATE PARTITION FUNCTION partition_function_name ( input_parameter_type )
AS RANGE [ LEFT | RIGHT ] 
FOR VALUES ( [ boundary_value [ ,...n ] ] ) 
[ ; ]

       通过定义分区函数的原型，我们看出其中并没有具体涉及具体的表.因为分区函数并不和具体的表相绑定.上面原型中还可以看到Range left和right.这个参数是决定临界值本身应该归于“left”还是“right”：

       6

        下面我们根据上面的参数定义分区函数:

         7

         通过系统视图，可以看见这个分区函数已经创建成功

    定义分区构架

        定义完分区函数仅仅是知道了如何将列的值区分到了不同的分区。而每个分区的存储方式，则需要分区构架来定义.使用分区构架需要你对文件和文件组有点了解.

        我们先来看MSDN的分区构架的原型:

    CREATE PARTITION SCHEME partition_scheme_name
AS PARTITION partition_function_name
[ ALL ] TO ( { file_group_name | [ PRIMARY ] } [ ,...n ] )
[ ; ]

        从原型来看，分区构架仅仅是依赖分区函数.分区构架中负责分配每个区属于哪个文件组，而分区函数是决定如何在逻辑上分区:

         8

         基于之前创建的分区函数,创建分区构架:

         9

    定义分区表

        接下来就该创建分区表了.表在创建的时候就已经决定是否是分区表了。虽然在很多情况下都是你在发现已经表已经足够大的时候才想到要把表分区，但是分区表只能够在创建的时候指定为分区表。

        10

        为刚建立的分区表PartitionedTable加入5万条测试数据，其中SalesDate随机生成，从2001年到2010年随机分布.加入数据后，我们通过如下语句来看结果:

    select convert(varchar(50), ps.name) as partition_scheme,
p.partition_number, 
convert(varchar(10), ds2.name) as filegroup, 
convert(varchar(19), isnull(v.value, ''), 120) as range_boundary, 
str(p.rows, 9) as rows
from sys.indexes i 
join sys.partition_schemes ps on i.data_space_id = ps.data_space_id 
join sys.destination_data_spaces dds
on ps.data_space_id = dds.partition_scheme_id 
join sys.data_spaces ds2 on dds.data_space_id = ds2.data_space_id 
join sys.partitions p on dds.destination_id = p.partition_number
and p.object_id = i.object_id and p.index_id = i.index_id 
join sys.partition_functions pf on ps.function_id = pf.function_id 
LEFT JOIN sys.Partition_Range_values v on pf.function_id = v.function_id
and v.boundary_id = p.partition_number - pf.boundary_value_on_right 
WHERE i.object_id = object_id('PartitionedTable')
and i.index_id in (0, 1) 
order by p.partition_number

       可以看到我们分区的数据分布:

        11

    分区表的分割

         分区表的分割。相当于新建一个分区，将原有的分区需要分割的内容插入新的分区，然后删除老的分区的内容,概念如下图:

         假设我新加入一个分割点：2009-01-01，则概念如下:

         12

         通过上图我们可以看出，如果分割时，被分割的分区3内有内容需要分割到分区4，则这些数据需要被复制到分区4，并删除分区3上对应数据。

         这种操作非常非常消耗IO，并且在分割的过程中锁定分区三内的内容，造成分区三的内容不可用。不仅仅如此，这个操作生成的日志内容会是被转移数据的4倍！

         所以我们如果不想因为这种操作给客户带来麻烦而被老板爆菊的话…最好还是把分割点建立在未来（也就是预先建立分割点)，比如2012-01-01。则分区3内的内容不受任何影响。在以后2012的数据加入时，自动插入到分区4.

         分割现有的分区需要两个步骤:

         1.首先告诉SQL SERVER新建立的分区放到哪个文件组

         2.建立新的分割点

         可以通过如下语句来完成:

         13

         如果我们的分割构架在定义的时候已经指定了NEXT USED，则直接添加分割点即可。

         通过文中前面查看分区的长语句..再来看:

         14

         新的分区已经加入！

    分区的合并

         分区的合并可以看作分区分割的逆操作。分区的合并需要提供分割点，这个分割点必须在现有的分割表中已经存在，否则进行合并就会报错

         假设我们需要根据2009-01-01来合并分区,概念如下:

         15

         只需要使用merge参数：

         16

         再来看分区信息:

         17

        

         这里值得注意的是，假设分区3和分区4不再一个文件组，则合并后应该存在哪个文件组呢？换句话说，是由分区3合并到分区4还是由分区4合并到分区3？这个需要看我们的分区函数定义的是left还是right.如果定义的是left.则由左边的分区3合并到右边的分区4.反之，则由分区4合并到分区3:

         18

    平时我们说的SQLSERVER表分区技术，默认一个表的所有数据存放在一个分区，如果使用表分区，那么DBA可以决定要建多少

    个分区，规划表的数据存放到哪一个分区。当然，创建了分区还不能实现减轻I/O负载，还要创建几个文件组，创建多少个由DBA

    决定，DBA还要决定把哪些分区放在哪个文件组，最后决定把哪些文件组放在哪些磁盘，要把文件组放在不同的磁盘才能真正实现

    减轻I/O负载。当客户端访问某一部分数据的时候，如果数据放在A分区，A分区在A文件组，A文件组位于A磁盘，那么SQL就去A磁

    盘读数据，当客户端要访问某一部分数据放在B分区，B分区在B文件组，B文件组位于B磁盘，那么SQL就去B磁盘读数据，从而减轻

    单独一个磁盘的I/O压力。

    最后说明一下表分区技术是SQL2005才有的，因为分区是从SQL2005才开始引入的！！

    最最后说一下：只有数据文件才有文件组，日志文件是没有文件组的，因为数据文件跟日志文件的存储方式是不一样的！！

    2012-12-22补充：

    有些人问 ：在创建非聚集索引的时候为什么不加NONCLUSTERED关键字也可以，其实下面两个语句都是一样的

    复制代码
    1 CREATE NONCLUSTERED INDEX SalesOrderDetail_test_NCL_Price ON [dbo].[SalesOrderDetail_test]([UnitPrice])
2 GO
3 
4 
5 CREATE  INDEX SalesOrderDetail_test_NCL_Price ON [dbo].[SalesOrderDetail_test]([UnitPrice])
6 GO
    复制代码

    其实在SQLSERVER里面只有两种索引，聚集索引跟非聚集索引 如果你不加CLUSTERED关键字（聚集索引）一概都是非聚集索引
    所以加不加“NONCLUSTERED”关键字也无所谓
  • 相关阅读:
    Oracle和SQLServer中实现跨库查询
    sqlserver中创建链接服务器
    无法从命令行或调试器启动服务，必须首先安装Windows服务(使用installutil.exe),然后用ServerExplorer、Windows服务器管理工具或NET START命令启动它
    Win8系统运行程序提示“占位程序接收到错误数据”的解决方法
    设计模式——简单工厂模式
    设计模式——单例模式
    设计模式——观察者模式
    三一集团提前批java面经
    form表单传到后端的数据乱码
    Failed to obtain the JDBC Connection + Access denied for user 'XXX'@'localhost' (using password: YES)
  • 原文地址：https://www.cnblogs.com/zyy1688/p/10002615.html
Copyright © 2011-2022 走看看