背景: 需要更新一些不规范的时间格式,如将某个时间格式化为yy-MM-dd,实际上为 yy-MM-dd hh:mm:ss,并且需要提供回滚脚本. 例如:规范化时间的脚本如下: ,) WHERE test_date>'2017-06-01 00:00:00' AND test_date<'2017-09-07 00:00:00' 这个脚本是ok,但执行时受到影响的行数如果有几百条甚至上千条记录的话,回滚脚本怎么写呢? 模板如下: update test set test_date= '' whe…

Java使用iBatis批量插入数据到Oracle数据库 因为我们的数据跨库(mysql,oracle),单独取数据的话需要遍历好多遍,所以就想着先从mysql数据库中取出来的数据然后在oracle数据库中建立结果集对应的临时表,先插入然后再统一查询(中间就节省了遍历再重组数据的时间了). 1.首先我们从mysql数据库中查询出对应数据 sql: <select id="queryUsers" parameterClass="java.util.Map" re…

ado.net已经有了sqlBulkCopy, 但是那个用xml格式,网络传输数据量太大. 自己实现了一个,传输尽量少的字节. 性能没对比过,有需要的自己拿去测试. using System.Data.SqlClient; namespace RaywindStudio.DAL { /// <summary> /// MSSQL批量插入表 /// </summary> public static class SqlBulkInsert { private static bool i…

只是一个例子,方便以后查阅. import ey.db.oracle.OracleHelper; import ey.db.type.*; import java.io.BufferedReader; import java.io.File; import java.io.FileFilter; import java.io.FileInputStream; import java.io.FileOutputStream; //import java.io.FileNotFoundExcepti…

参考资料:http://www.w3school.com.cn/sql/sql_union.asp   UNION:操作符用于合并两个或多个select语句的结果集.                 注意   union内部的select语句必须拥有相同的列数并且字段类型相同,且顺序相同. INSERT:  批量插入结果集                1. insert into table                 select x,y from A                 U…

http://www.cnblogs.com/azhqiang/p/4050331.html 在进行数据库操作时, 我们经常会遇到批量向数据库中写入记录的情况. 在这里我提供3种操作方式:   1.  单条语句循环插入, 这是最笨的方法: for i := 0 to 100 do   ADOCommand1.Execute('IINSERT INTO .....')   //伪码, 只是说明意思   2.  多条语句批量插入, 将多条Insert语句拼成一条语句, 一次执行: for i :=…

using System;using System.Collections.Generic;using System.ComponentModel;using System.Data;using System.Data.Common;using System.Data.Entity;using System.Data.SqlClient;using System.Linq; namespace TY.Tools{ /// <summary> /// 批量插入 /// </summary&…

create  PROCEDURE insertinto as begindeclare @id int;set @id=1;while @id<10begininsert into person (id,name) values(@id,'123')set @id=@id+1endend 批量插入数据: 定义变量,执行循环,将int转化为varchar.例如:convert(varchar(10),@bmc) declare @name  varchar(50);declare @pwd va…

批量插入100条记录 set nocount on declare @i int=1; while @i<=100 begin Insert into Client(id,ClientCode,ClientName,ClientGroup,stype,Contact,ClientTel,SendAddress) select @i+8,'C'+right('000000'+CAST(@i as varchar),6),'Customer'+CAST(@i as varchar),'B组','E帐…

后面进行完善修改. /*批量插入数据*/ 这个比较完善.直接插入数据库表. INSERT INTO `goods_transverter` ( `code`,`es_id`,`barcode`, `name`) SELECT t.`妈宝条码`,t.`标识ID`,t.`商品条码`,t.`商品名称` FROM hbx.`商品数据` as t 查询华创的条码的配送价,采购价 ,),,),gb.`name` FROM hbx.`商品数据` as sp LEFT JOIN arm_changsha.goo…

1.有一个普通的表t_asset,只有2个字段id,ip 没有索引 2.当用insert into t_asset(id,ip) values(?,?),(?,?) 1200多条记录时,发现竟然用了30秒左右,不可能性能这么差啊 3.后来各种google,发现jdbc的连接串里,只配置了字符集啥也没配,默认是没有开启批量插入功能的 修改如下 jdbc:mysql://11.51.194.152:3358/test?rewriteBatchedStatements=true&useUnicode=…

使用SqlBulk #region 方式二 static void InsertTwo() { Console.WriteLine("使用Bulk插入的实现方式"); Stopwatch sw = new Stopwatch(); DataTable dt = GetTableSchema(); using (SqlConnection conn = new SqlConnection(StrConnMsg)) { SqlBulkCopy bulkCopy = new SqlBulkC…

package sqlserver; import java.util.Date; import java.util.UUID; import java.text.SimpleDateFormat; import java.io.BufferedOutputStream; import java.io.File; import java.io.FileInputStream; import java.io.FileNotFoundException; import java.io.FileOut…

测试数据 -- 创建测试表1 CREATE TABLE `testtable1` ( `Id` INT(11) UNSIGNED NOT NULL AUTO_INCREMENT, `UserId` INT(11) DEFAULT NULL, `UserName` VARCHAR(10) DEFAULT NULL, `UserType` INT(11) DEFAULT NULL, PRIMARY KEY (`Id`), UNIQUE KEY `IX_UserId` (`UserId`) ) ENG…

-- ============================================= -- Author: jf_ou -- Create date: 2016/03/22 -- Description: 插相关配置到配置表 -- eg: -- EXEC AddSysParametersForProjects 'father', 'son', '123, 1234, 12345, 123456', ',' -- ====================================…

使用: ROW_NUMBER() over(order by ID desc) insert into dbo.Aa(Name,Nums) select top 10 NickName,ROW_NUMBER() over(order by ID desc) as Nums from td_UserInfo 插入后,Nums的字段就是从1开始的自增数字.…

1.每4000条插入一次 for (int i = 0; i < dt.Rows.Count; i++) { IsTBProductForStockInfo model = new IsTBProductForStockInfo(); model.SyncSkuCode = dt.Rows[i]["SyncSkuCode"].ToString(); model.SkuId = dt.Rows[i]["SkuId"].ToString(); info.Add(m…

1.原因:在使用SqlBulkCopy批量操作时,Map映射会出现表结点对应错误 2.解决方案:自己先建立字段映射 using (SqlConnection con = new SqlConnection(DbConfig.CsNisConnString)) { con.Open(); using (SqlTransaction tran = con.BeginTransaction()) { SqlBulkCopy bc = new SqlBulkCopy(con, SqlBulkCopyOp…

代码:  SET IDENTITY_INSERT 表名 ON  SET IDENTITY_INSERT 表名 OFF…

//执行DataTable数据导入 public static int UpdateDt(string strConn, DataTable dt) { try { string tablaName = dt.TableName; string strSQL = string.Format(" Select * From {0} Where 1=2 ", tablaName); ; using (SqlConnection con = GetConnection(strConn)) {…

示例1,for用法: begin for i in 1...10000 loop insert into test values(i,i,'aaa',sysdate); if i mod 20 = 0 then commit; endif; end loop; commit; end; 示例2,while用法: declare count int default 1: begin while  count <= 10000 loop insert into test values(count);…

使用场景 在项目中,涉及到数据库表变更时,可能会需要将一个或多个表中的数据迁移到另一个表中. 这时用sql去执行会很方便! sql语句 //SQL批量插入 create table #ttableName(id int identity(1,1),customerid int,grade int,popularity int) declare @n int,@rows int declare @e int, @g int,@p int insert #ttableName(customerid,…

先上官方示例代码:官方示例 Java代码: // 批量插入数据 public void InsertBatch() { try { // 设置集群名称 Settings settings = Settings.builder().put("cluster.name", "my-es-analyze").build(); // 创建client TransportClient client = new PreBuiltTransportClient(settings)…

利用了iterate标签来做的: 先看iterate标签几个属性的: prepend-加在open指定的符号之前的符号,添加在语句的前面(可选) property-类型为ArrayList的用于遍历的元素, 这个必须是一个IList类型(可选) open-整个遍历内容体开始的字符串,用于定义括号(可选) close-整个遍历内容体结束的字符串,用于定义括号(可选) conjunction-每次遍历内容之间的字符串,可以空格,AND或OR(可选) 配置文件如下: <!--批量导入数据--> &l…

#region 帮助实例:SQL 批量插入数据 多种方法 /// <summary> /// SqlBulkCopy往数据库中批量插入数据 /// </summary> /// <param name="sourceDataTable">数据源表</param> /// <param name="targetTableName">服务器上目标表</param> /// <param nam…

import ibm_db import random import time first_names = '赵钱孙李周吴郑王冯陈褚卫蒋沈韩杨朱秦尤许何吕施张孔曹严华金魏' \ '陶姜戚谢邹喻柏水窦章云苏潘葛奚范彭郎鲁韦昌马苗凤花方俞任袁柳酆鲍' \ '史唐费廉岑薛雷贺倪汤滕殷罗毕安常乐于时傅皮卞齐康伍余元顾孟黄穆萧尹' \ '姚邵湛汪祁毛狄米贝明臧计伏成戴谈宋庞熊纪舒屈项祝董梁杜阮蓝闵季贾路娄' \ '危江童颜郭梅林刁钟徐邱骆高夏蔡田樊胡凌霍虞万柯管卢莫房缪干解丁宣邓郁单' \ '洪包诸左石崔…

由于之前面试中经常被问到有关EF的数据批量插入问题,今天以Sqlserver数据库为例,对.net中处理数据批量处理的方案进行了测试对比. 1.四种测试方案 (1)普通的EF数据批量插入:即调用DbSet中的Addrange方法 (2)不进行上下文跟踪的EF数据批量插入:即关闭自调用的DetectChanges方法,不对每一个添加的实体进行扫描 (3)在EF中执行sql批量插入 (4)Ado.net执行sql批量插入 (5)利用sqlserver的Bcp功能作批量插入:代码中利用了SqlBulk…

测试用的示例java代码: package com.zifeiy.test.normal; import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import java.io.OutputStreamWriter; import java.sql.Connection; import java.sql.DriverManager; import java.sql.SQLException…

我的数据库环境是mysql Ver 14.14 Distrib 5.6.45, for Linux (x86_64) using EditLine wrapper 这个数据库是安装在T440p的虚拟机上的,操作系统为CentOs6.5. 我的数据表是这样的: CREATE TABLE `emp` ( `Id` ) NOT NULL AUTO_INCREMENT, `name` ) DEFAULT NULL, `age` ) DEFAULT NULL, `cdate` timestamp NULL…

案例是给一个用户赋予多个权限,多个权限用其对应的主键 id 为参数,组成了 一个id数组,传给springMVC,然后springMVC传给mybatis,然后mybatis批量插入.其实类似的场景还有批量删除多个,也是类似的. 1. 前台页面 <thead><tr><th>权限选择</th><th>name</th><th>permission</th></tr></thead> &l…