1. 有标识列的表

1.1 SqlBulkCopyOptions.KeepIdentity  必须设置!否则会出现复制过去的数据产生标识列发现变化的情况!

1.2 如果原表的标识列即为主键, 那按1.1 的设置已足够。 如果原表无主键, 那在复制之前必须先清空原表(truncate table), 否则会出现多个相同的标识值的列!

2. 为NULL值的列

2.1 SqlBulkCopyOptions.KeepNulls 必须设置!否则会出现源数据的字段为NULL时, 复制过去却成了默认值!

其它几个选项的说明与分析:

Default  对所有选项使用默认值。  
 KeepIdentity 保留源标识值。如果未指定,则由目标分配标识值。  
 CheckConstraints  请在插入数据的同时检查约束。默认情况下,不检查约束。  
 TableLock  在批量复制操作期间获取批量更新锁。如果未指定,则使用行锁。  
 KeepNulls 保留目标表中的空值,而不管默认值的设置如何。如果未指定,则空值将由默认值替换(如果适用)。  
 FireTriggers  指定后,会导致服务器为插入到数据库中的行激发插入触发器。  默认情况下, 是不激发触发器的……
 UseInternalTransaction  如果已指定,则每一批批量复制操作将在事务中发生。 在一个事务中执行,要么都成功,要么都不成功

Default 就没有什么好说的了, 不要

KeepIdentity  和 KeepNulls
 上面已有了, 不再分析。

CheckConstraints
不需要, 因为是现成的数据, 既然已在DB中, 必然是通过了约束检查的。

TableLock
不需要, 因为复制时两个库都需要处于单连接状态, 不可能有干扰。

FireTriggers
 一般就不需要了吧, 毕竟只是复制数据, 而且是现成的数据……

UseInternalTransaction
 关系也不大, 反正复制失败会记录到自定义的日志, 失败了也知道, 重来一次就可以了。

下面是便于测试的代码

SQL:

--1. 建数据来源表
IF EXISTS (
SELECT 1 FROM sysobjects
WHERE id = OBJECT_ID(N'Table_1')
AND OBJECTPROPERTY(id, N'IsUserTable') = 1
)
BEGIN
DROP TABLE Table_1
END
GO
Create Table Table_1(
ID INT,
[NAME] VARCHAR(50) DEFAULT('xx')
)
GO
INSERT INTO Table_1
SELECT 1,'a' UNION
SELECT 2,'b' UNION
SELECT 3,'c' UNION
SELECT 4,'d' UNION
SELECT 5,'e' UNION
SELECT 6,null --2. 建目标表
IF EXISTS (
SELECT 1 FROM sysobjects
WHERE id = OBJECT_ID(N'Table_2')
AND OBJECTPROPERTY(id, N'IsUserTable') = 1
)
BEGIN
DROP TABLE Table_2
END
GO
Create Table Table_2(
ID2 INT,
[NAME2] VARCHAR(50) DEFAULT('xx')
)
GO --复制时的对应关系
--Tabe_1 ==> Table_2
--ID ==> ID2
--[NAME] ==> [NAME2]

C# 控制台程序:

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.Data.SqlClient;
using System.Collections; namespace SqlBulkCopyDemo
{
class Program
{
static void Main(string[] args)
{
string connString = System.Configuration.ConfigurationManager.AppSettings["DCString"];
SqlConnection ConnectionNew = new SqlConnection(connString);
SqlConnection ConnectionOld = new SqlConnection(connString);
bool ExportInfo = System.Configuration.ConfigurationManager.AppSettings["ExportInfo"].ToLower()=="true";
try
{
ConnectionNew.Open();
ConnectionOld.Open(); //1.在旧表中,用SqlDataReader读取出信息
string SQL = "select * from Table_1"; SqlCommand cmd = new SqlCommand(SQL, ConnectionOld);
cmd.CommandTimeout = ;
SqlDataReader sdr = cmd.ExecuteReader(); //2.初始化SqlBulkCopy对象,用新的连接作为参数。
SqlBulkCopy bulkCopy = new SqlBulkCopy(ConnectionNew, SqlBulkCopyOptions.KeepIdentity | SqlBulkCopyOptions.KeepNulls, null);
bulkCopy.BulkCopyTimeout = ; //3.写对应关系。如旧表的People列的数据,对应新表Human列,那么就写bulkCopy.ColumnMappings.Add("People","Human")
//如果两张表的结构一样,那么对应关系就不用写了。
//我是用哈希表存储对应关系的,哈希表作为参数到传入方法中,key的值用来存储旧表的字段名,VALUE的值用来存储新表的值
Hashtable ht = new Hashtable();
ht.Add("ID", "ID2");
ht.Add("NAME", "NAME2");// foreach (string str in ht.Keys)
{
bulkCopy.ColumnMappings.Add(str, ht[str].ToString());
} //4.设置目标表名
bulkCopy.DestinationTableName = "Table_2"; //额外,可不写:设置一次性处理的行数。这个行数处理完后,会激发SqlRowsCopied()方法。默认为1
bulkCopy.NotifyAfter = ; if (ExportInfo)
{
//额外,可不写:设置激发的SqlRowsCopied()方法,这里为bulkCopy_SqlRowsCopied
bulkCopy.SqlRowsCopied += new SqlRowsCopiedEventHandler(bulkCopy_SqlRowsCopied);
} //OK,开始传数据!
DateTime dt = DateTime.Now;
Console.WriteLine("开始时间:{0:yyyy-MM-dd HH:mm:ss,ms}", dt);
bulkCopy.WriteToServer(sdr);
DateTime dt2 = DateTime.Now;
Console.WriteLine("结束时间:{0:yyyy-MM-dd HH:mm:ss,ms}", dt2);
double time = dt2.Subtract(dt).TotalMilliseconds;
Console.WriteLine("传输完毕!所用时间为:{0}(ms)", time);
Console.Read();
}
catch (Exception ex)
{
Console.Write(ex.Message);
Console.Read();
}
finally
{
ConnectionNew.Close();
ConnectionOld.Close();
}
} //激发的方法写在外头
private static void bulkCopy_SqlRowsCopied(object sender, SqlRowsCopiedEventArgs e)
{
//执行的内容。
//这里有2个元素值得拿来用
//e.RowsCopied, //返回数值类型,表示当前已经复制的行数
//e.Abort, //用于赋值true or false,用于停止赋值的操作
Console.WriteLine("当前已复制的行数:" + e.RowsCopied);
}
}
}

配置文件:

<?xml version="1.0" encoding="utf-8" ?>
<configuration>
<appSettings>
<add key="DCString" value="Data Source=(local);Initial Catalog=db_Study;Persist Security Info=True;User ID=??;Password=??" />
<add key="ExportInfo" value="false" />
</appSettings>
</configuration>

 
 
************转载:https://blog.csdn.net/yenange/article/details/35837247

SqlBulkCopy使用注意事项的更多相关文章

  1. SqlBulkCopy使用介绍以及注意事项

    SqlBulkCopy,微软提供的快速插入类,针对大批量数据操作,此类效果明显有所提升,以下是微软官方解释: Microsoft SQL Server 提供一个称为 bcp 的流行的命令提示符实用工具 ...

  2. 数据库调优过程(一):SqlServer批量复制(bcp)[C#SqlBulkCopy]性能极低问题

    背景 最近一段给xx做项目,这边最头疼的事情就是数据库入库瓶颈问题. 环境 服务器环境:虚拟机,分配32CPU,磁盘1.4T,4T,5T,6T几台服务器不等同(转速都是7200r),内存64G. 排查 ...

  3. SqlBulkCopy 批量复制数据到数据库

    1.简介 1.MSDN 核心方法:SqlBulkCopy.WriteToServer 将所有行从数据源复制到 SqlBulkCopy 对象的 DestinationTableName 属性指定的目标表 ...

  4. 海量数据插入数据库效率对照測试 ---ADO.NET下SqlBulkCopy()对照LINQ 下InsertAllOnSubmit()

    摘要:使用.NET相关技术向数据库中插入海量数据是经常使用操作.本文对照ADO.NET和LINQ两种技术.分别使用SqlBulkCopy()和InsertAllOnSubmit()方法进行操作. 得出 ...

  5. 【ITOO 1】SQLBulkCopy实现不同数据库服务器之间的批量导入

    导读:在做项目的时候,当实现了动态建库后,需要实现从本地服务器上获取数据,批量导入到新建库的服务器中的一个表中去.之前是用了一个SQL脚本文件实现,但那时候没能实现不同的数据库服务器,现在用了SqlB ...

  6. jQuery UI resizable使用注意事项、实时等比例拉伸及你不知道的技巧

    这篇文章总结的是我在使用resizable插件的过程中,遇到的问题及变通应用的奇思妙想. 一.resizable使用注意事项 以下是我在jsfiddle上写的测试demo:http://jsfiddl ...

  7. Windows Server 2012 NIC Teaming介绍及注意事项

    Windows Server 2012 NIC Teaming介绍及注意事项 转载自:http://www.it165.net/os/html/201303/4799.html Windows Ser ...

  8. TODO:Golang指针使用注意事项

    TODO:Golang指针使用注意事项 先来看简单的例子1: 输出: 1 1 例子2: 输出: 1 3 例子1是使用值传递,Add方法不会做任何改变:例子2是使用指针传递,会改变地址,从而改变地址. ...

  9. app开发外包注意事项,2017最新资讯

    我们见过很多创业者,栽在这app外包上.很多创业者对于app外包这件事情不是特别重视,以为将事情交给app外包公司就完事了,实际上不是的.无论是从选择app外包公司还是签订合同.售后维护等各方面都有许 ...

随机推荐

  1. CE学习记录1

    主题 春节放假终于有空学习下怎么制作外挂啦......学习写外挂大概是我一开始学习计算机的动力吧....只是一直似懂非懂..看教学视频各种不明白为什么....也没有专门的时间学习下怎么写....春节有 ...

  2. 一个简单的AXIS远程调用Web Service示例

    我们通常都将编写好的Web Service发布在Tomcat或者其他应用服务器上,然后通过浏览器调用该Web Service,返回规范的XML文件.但是如果我们不通过浏览器调用,而是通过客户端程序调用 ...

  3. python 生成器的理解和总结

    1. 生成器 利用迭代器,我们可以在每次迭代获取数据(通过next()方法)时按照特定的规律进行生成.但是我们在实现一个迭代器时,关于当前迭代到的状态需要我们自己记录,进而才能根据当前状态生成下一个数 ...

  4. Linux 安装(重装)mysql

    1 新建存放mysql相关文件的文件夹 mkdir -p /export/servers/mysql //存放mysql相关的几个rpm文件 2 查看原有mysql 并卸载 rpm -qa | gre ...

  5. 4.SELECT DISTINCT 语句

    在表中,可能会包含重复值.这并不成问题,不过,有时您也许希望仅仅列出不同(distinct)的值. 关键词 DISTINCT 用于返回唯一不同的值. 语法: SELECT DISTINCT 列名称 F ...

  6. linux-常用命令备注

    //杀掉某个进程-xargs应用 ps aux | grep "udplog.js" | cut -c 9-15 | xargs kill -9 //远程拷贝文件或文件夹 sudo ...

  7. URAL 1141. RSA Attack(欧拉定理+扩展欧几里得+快速幂模)

    题目链接 题意 : 给你n,e,c,并且知道me ≡ c (mod n),而且n = p*q,pq都为素数. 思路 : 这道题的确与题目名字很相符,是个RSA算法,目前地球上最重要的加密算法.RSA算 ...

  8. (转)使用Jquery+EasyUI 进行框架项目开发案例讲解之一 员工管理源码分享

    原文地址:http://www.cnblogs.com/huyong/p/3334848.html 在开始讲解之前,我们先来看一下什么是Jquery EasyUI?jQuery EasyUI是一组基于 ...

  9. BZOJ 4034[HAOI2015]树上操作(树链剖分)

    Description 有一棵点数为 N 的树,以点 1 为根,且树点有边权.然后有 M 个操作,分为三种:操作 1 :把某个节点 x 的点权增加 a .操作 2 :把某个节点 x 为根的子树中所有点 ...

  10. 关于在审查元素中看到的::before与::after

    审查元素中看到的这两个标签,表示内容并不在元素中,而是在css中,可以查看style看到具体内容. 一般来说这样做是为了清除浮动(clearfix)的代码,防止后边的容器因为浮动出现布局的混乱. 添加 ...