zoukankan      html  css  js  c++  java
  • 化解字符串不能超过8000的方法

    经常有人提到,用动态生成SQL语句的方法处理数据时,处理语句超长,无法处理的问题
    下面就讨论这个问题:

    /*-- 数据测试环境 --*/
    if exists (select * from dbo.sysobjects where id = object_id(N'[tb]') and OBJECTPROPERTY(id, N'IsUserTable') = 1)
    drop table [tb]
    GO

    create table tb(单位名称 varchar(10),日期 datetime,销售额 int)
    insert into tb
            select 'A单位','2001-01-01',100
            union all select 'B单位','2001-01-02',101
            union all select 'C单位','2001-01-03',102
            union all select 'D单位','2001-01-04',103
            union all select 'E单位','2001-01-05',104
            union all select 'F单位','2001-01-06',105
            union all select 'G单位','2001-01-07',106
            union all select 'H单位','2001-01-08',107
            union all select 'I单位','2001-01-09',108
            union all select 'J单位','2001-01-11',109

    /*-- 要求结果
    日期       A单位  B单位 C单位 D单位 E单位  F单位 G单位 H单位 I单位 J单位   
    ---------- ----- ----- ----- ----- ----- ----- ----  ----  ---- ------
    2001-01-01 100   0     0     0     0     0     0     0     0     0
    2001-01-02 0     101   0     0     0     0     0     0     0     0
    2001-01-03 0     0     102   0     0     0     0     0     0     0
    2001-01-04 0     0     0     103   0     0     0     0     0     0
    2001-01-05 0     0     0     0     104   0     0     0     0     0
    2001-01-06 0     0     0     0     0     105   0     0     0     0
    2001-01-07 0     0     0     0     0     0     106   0     0     0
    2001-01-08 0     0     0     0     0     0     0     107   0     0
    2001-01-09 0     0     0     0     0     0     0     0     108   0
    2001-01-11 0     0     0     0     0     0     0     0     0     109
    --*/

    /*-- 常规处理方法
    declare @sql varchar(8000)
    set @sql='select 日期=convert(varchar(10),日期,120)'
    select @sql=@sql+',['+单位名称
            +']=sum(case 单位名称 when '''+单位名称+''' then 销售额 else 0 end)'
    from(select distinct 单位名称 from tb) a
    exec(@sql+' from tb group by convert(varchar(10),日期,120)')
    --*/

    /*-- 问题 --*/

    如果单位很多,这时,@SQL的值就会被截断,从而出错.

    下面给出两种解决办法:

    --/*-- 方法1. 多个变量处理

    --定义变量,估计需要多少个变量才能保存完所有数据
    declare @sql0 varchar(8000),@sql1 varchar(8000)
    --,...@sqln varchar(8000)

    --生成数据处理临时表
    select id=identity(int,0,1),groupid=0
            ,值=',['+单位名称        +']=sum(case 单位名称 when '''
            +单位名称+''' then 销售额 else 0 end)'
    into #temp from(select distinct 单位名称 from tb) a

    --分组临时表,判断慨最多多少个单位可以组合成一个不超过8000的字符串,这里取假设为5个
    update #temp set groupid=id/5  --5为每组的单位个数

    --生成SQL语句处理字符串
      --初始化
    select @sql0=''
            ,@sql1=''
    --        ...
    --        ,@sqln

      --得到处理字符串
    select @sql0=@sql0+值 from #temp where groupid=0  --第一个变量
    select @sql1=@sql1+值 from #temp where groupid=1  --第二个变量
    --select @sqln=@sqln+值 from #temp where groupid=n  --第n个变量

    --查询
    exec('select 日期=convert(varchar(10),日期,120)'
            +@sql0+@sql1
    --        ...+@sqln
            +' from tb group by convert(varchar(10),日期,120)
    ')

    --删除临时表
    drop table #temp

    /*
    优点:比较灵活,数据量大时只需要增加变量就行了.不用改动其他部分
    缺点:要自行估计处理的数据,估计不足就会出错
    */
    --*/

     --/*--方法2. bcp+isql

    --因为要用到bcp+isql,所以需要这些信息
    declare @servername varchar(250),@username varchar(250),@pwd varchar(250)
    select @servername='zj'                --服务器名
            ,@username=''                                --用户名
            ,@pwd=''                                        --密码

    declare @tbname varchar(50),@sql varchar(8000)

    --创建数据处理临时表
    set @tbname='[##temp_'+convert(varchar(40),newid())+']'
    set @sql='create table '+@tbname+'(值 varchar(8000))
            insert into '+@tbname+' values(''create view '
            +stuff(@tbname,2,2,'')+' as
    select 日期=convert(varchar(10),日期,120)'')'
    exec(@sql)

    set @sql='insert into '+@tbname+'
    select '',[''+单位名称+'']=sum(case 单位名称 when ''''''
            +单位名称+'''''' then 销售额 else 0 end)''
            from(select distinct 单位名称 from tb) a'
    exec(@sql)

    set @sql='insert into '+@tbname+'
            values(''from tb group by convert(varchar(10),日期,120)'')'
    exec(@sql)

    --生成创建视图的文件,注意使用了文件:c: emp.txt
    set @sql='bcp "'+@tbname+'" out "c: emp.txt" /S"'
            +@servername+'" /U"'+@username+'" /P"'+@pwd+'" /c'
    exec master..xp_cmdshell @sql

    --删除临时表
    set @sql='drop table '+@tbname
    exec(@sql)

    --调用isql生成数据处理视图
    set @tbname=stuff(@tbname,2,2,'')
    set @sql='isql /S"'+@servername
            +case @username when '' then '" /E' else '" /U"'+@username+'" /P"'+@pwd+'"' end
            +' /d"'+db_name()+'" /i"c: emp.txt"'

    exec master..xp_cmdshell @sql

    --调用视图,显示处理结果
    set @sql='select * from '+@tbname+'
            drop view '+@tbname
    exec(@sql)

    /*
    优点:程序自动处理,不存在判断错误的问题
    缺点:复杂,经过的步骤多,容易出错,而且需要一定的操作员权限
    */
    --*/

    --/*-- 方法3. 多个变量处理,综合了方法1及方法2的优点, 解决了方法1中需要人为判断的问题,自动根据要处理的数据量进行变量定义,同时又避免了方法2的繁琐

    declare @sqlhead varchar(8000),@sqlend varchar(8000)
            ,@sql1 varchar(8000),@sql2 varchar(8000),@sql3 varchar(8000),@sql4 varchar(8000)
            ,@i int,@ic varchar(20)

    --生成数据处理临时表
    select id=identity(int,0,1),gid=0
            ,a=',['+单位名称        +']=sum(case 单位名称 when '''
            +单位名称+''' then 销售额 else 0 end)'
    into # from(select distinct 单位名称 from tb) a

    --判断需要多少个变量来处理
    select @i=max(len(a)) from #
    print @i
    set @i=7800/@i

    --分组临时表
    update # set gid=id/@i
    select @i=max(gid) from #

    --生成数据处理语句
    select @sqlhead='''select 日期=convert(varchar(10),日期,120)'''
            ,@sqlend=''' from tb group by convert(varchar(10),日期,120)'''
            ,@sql1='',@sql2='select ',@sql3='',@sql4=''

    while @i>=0
            select @ic=cast(@i as varchar),@i=@i-1
                    ,@sql1='@'+@ic+' varchar(8000),'+@sql1
                    ,@sql2=@sql2+'@'+@ic+'='''','
                    ,@sql3='select @'+@ic+'=@'+@ic+'+a from # where gid='+@ic
                            +char(13)+@sql3
                    ,@sql4=@sql4+',@'+@ic

    select @sql1='declare '+left(@sql1,len(@sql1)-1)+char(13)
            ,@sql2=left(@sql2,len(@sql2)-1)+char(13)
            ,@sql3=left(@sql3,len(@sql3)-1)
            ,@sql4=substring(@sql4,2,8000)

    --执行
    exec( @sql1+@sql2+@sql3+'
    exec('+@sqlhead+'+'+@sql4+'+'+@sqlend+')'
    )

    --删除临时表
    drop table #
    --*/

    第三种方法中,关键要做修改的是下面两句,其他基本上不用做改变:

    --生成数据处理临时表,修改a=后面的内容为相应的处理语句
    select id=identity(int,0,1),gid=0
            ,a=',['+code+']=sum(case b.c_code when '''
            +code+''' then b.value else 0 end)'
    into # from #Class

    --生成数据处理语句,将@sqlhead,@sqlend赋值为相应的处理语句头和尾
    select @sqlhead='''select a.id,a.name,a.code'''
            ,@sqlend=''' from #Depart a,#Value b where a.Code=b.d_Code group by a.id,a.code,a.name'''
            ,@sql1='',@sql2='select ',@sql3='',@sql4=''

    来自:http://www.itpub.net/forum.php?mod=viewthread&tid=166742

  • 相关阅读:
    Java实现 LeetCode 691 贴纸拼词(DFS+map记录)
    Java实现 LeetCode 691 贴纸拼词(DFS+map记录)
    PHP is_resource() 函数
    PHP is_float()、 is_double()、is_real()函数
    PHP is_object() 函数
    PHP is_numeric() 函数
    PHP is_null() 函数
    目标检测算法进展大盘点
    斯坦福大学李飞飞团队图像分类课程笔记
    激光雷达与应用
  • 原文地址:https://www.cnblogs.com/shuenjian901/p/3713624.html
Copyright © 2011-2022 走看看