在这里主要介绍下Sql批量插入的用法,让我们先看下批量删除一般如何来做。
1.批量删除很简单,大家可能都用过:
DELETE FROM TestTable WHERE ID IN (1, 3, 54, 68) --sql2005下运行通过
当用户在界面上不连续的选择多项进行删除时,该语句比循环调用多次删除或多条delete语句中间加分号一次调用等方法都高效的多。
2.批量插入的写法:

sql写法:
INSERT INTO TestTable SELECT 1, 'abc' UNION SELECT 2, 'bcd' UNION SELECT 3, 'cde'
--TestTable表没有主键,ID不是主键
oracle写法:
INSERT INTO TestTable SELECT 1, 'abc' From daul UNION SELECT 2, 'bcd' From daul
--TestTable表没有主键,ID不是主键
曾经测试过,这种写法插入1000条数据比循环调用1000次insert或1000条insert语句简单叠加一次调用要高效得多,大概快20多倍(调试状态不是太准)。其实很简单,就用了个union(union all 也可以),但当时得出测试结果时还是很惊喜的。
另外,union和union all是有区别的,UNION在进行表链接后会筛选掉重复的记录,所以在表链接后会对所产生的结果集进行排序运算,删除重复的记录再返回结果。 而UNION ALL只是简单的将两个结果合并后就返回。这样,如果返回的两个结果集中有重复的数据,那么返回的结果集就会包含重复的数据了。从效率上说,UNION ALL 要比UNION快很多,所以,如果可以确认合并的两个结果集中不包含重复的数据的话,那么就使用UNION ALL。
但是要使用上述方法来进行批量插入的话,需要两个条件:
1、表不能有主键或者主键是数据库默认的(sql用自动递增列,oracle用序列)
2、组合sql语句时只能直接用字符串连接,不能用参数化sql语句的写法(就是在组合的sql中用@parm做占位符,再给Command对象添加Parameter)
以上两条任意一条不满足,效率的提高都不明显。
由于是考虑到大数据量的批量插入,于是我想到了ADO.NET2.0的一个新的特性:SqlBulkCopy。有关这个的性能,很早之前我是亲自做过性能测试的,效率非常高。

private static long SqlBulkCopyInsert()
{
//Stopwatch stopwatch = new Stopwatch();
//stopwatch.Start();
DataTable dataTable = CreateDataTable();
string passportKey;
for (int i = 0; i < count; i++)
{
passportKey = Guid.NewGuid().ToString();
DataRow dataRow = dataTable.NewRow();
dataRow[0] = passportKey;
dataTable.Rows.Add(dataRow);
}
SqlBulkCopy sqlBulkCopy = new SqlBulkCopy(connectionString);
sqlBulkCopy.DestinationTableName = "Passport";
sqlBulkCopy.BatchSize = dataTable.Rows.Count;
//SqlConnection sqlConnection = new SqlConnection(connectionString);
//sqlConnection.Open();
if (dataTable!=null && dataTable.Rows.Count!=0)
{
sqlBulkCopy.WriteToServer(dataTable);
}
sqlBulkCopy.Close();
//sqlConnection.Close();
//stopwatch.Stop();
//return stopwatch.ElapsedMilliseconds;
}
图像处理笔记(四)
图像处理(三)
图像处理(二)
图像处理(一)
Halcon安装注意事项
Tensorflow从开始到放弃(技术篇)
Tensorflow从开始到放弃
python 2.x中的中文
WPF使用border画框
- 最新文章
-
is_numeric()
迅为4412开发板开发笔记--开发板与主机和ubuntu的ping通
人机界面HMI 迅为7寸工业平板电脑触摸屏一体机产品介绍
嵌入式高端研发 迅为iTOP-4418开发板最新介绍
人机界面HMI 迅为iTOP-HMI043触摸屏一体机 4寸工业平板电脑
嵌入式开发板哪个好?迅为iMX6开发板飞思卡尔iMX6Q开发板
BTC挖矿成本36473.35,市价43741.67,挖矿还有的赚吗?____五大币种挖矿成本分析2018-07-05
三个月收回成本?驾图挖矿IOVC、变现全流程教程
小白玩转区块链-赚个水果钱?币圈美女实测驾图盒子挖矿IOVC
小白话圈——虚拟货币,数字资产,加密货币等等,一脸蒙quan !
- 热门文章
-
王堅:「資料」改變了商業模式,運算能力決定企業的競爭力
[2016 ATF]未来不是阿里和谷歌的竞争 而是清华和斯坦福的竞争
阿里王坚:机器比人做得好的事,那这件事就不该由人来做
[2016物联网博览会]阿里王坚:万物互联网让数据真正发挥价值
[2016 T-EDGE]王坚对话无人机教父:创新就要享受走在悬崖边的刺激
[人物]一个预言家的命运:忽悠了马云的“骗子”,风口上的先知
[雪浪小镇启动仪式]阿里王坚:没有制造业的互联网没有未来?
[第十二届清华大学公共管理高层论坛]城市大脑,用数据重新认识城市
[2017全球人工智能高峰论坛]城市大脑是下一个十年的登月计划 王坚说出了什么?
1969年7月16日上午9点32分,“阿波罗11号”在肯尼迪空间中心的第39号发射台发射升空