数据库批量数据处理
来源:互联网 发布:php fpm原理 编辑:程序博客网 时间:2024/06/05 12:42
/// <summary>
/// 大批量插入数据(2000每批次)
/// 已采用整体事物控制
/// </summary>
/// <param name="connString">数据库链接字符串</param>
/// <param name="tableName">数据库服务器上目标表名</param>
/// <param name="dt">含有和目标数据库表结构完全一致(所包含的字段名完全一致即可)的DataTable</param>
public static void BulkCopy(string connString, string tableName, DataTable dt)
{
using (SqlConnection conn = new SqlConnection(connString))
{
conn.Open();
using (SqlTransaction transaction = conn.BeginTransaction())
{
using (SqlBulkCopy bulkCopy = new SqlBulkCopy(conn, SqlBulkCopyOptions.Default, transaction))
{
bulkCopy.BatchSize = 2000;
bulkCopy.BulkCopyTimeout = _CommandTimeOut;
bulkCopy.DestinationTableName = tableName;
try
{
foreach (DataColumn col in dt.Columns)
{
bulkCopy.ColumnMappings.Add(col.ColumnName, col.ColumnName);
}
bulkCopy.WriteToServer(dt);
transaction.Commit();
}
catch (Exception ex)
{
transaction.Rollback();
throw ex;
}
finally
{
conn.Close();
}
}
}
}
}
/// <summary>
/// 批量更新数据(每批次5000)
/// </summary>
/// <param name="connString">数据库链接字符串</param>
/// <param name="table"></param>
public static void Update(string connString, DataTable table)
{
SqlConnection conn = new SqlConnection(connString);
SqlCommand comm = conn.CreateCommand();
comm.CommandTimeout = _CommandTimeOut;
comm.CommandType = CommandType.Text;
SqlDataAdapter adapter = new SqlDataAdapter(comm);
SqlCommandBuilder commandBulider = new SqlCommandBuilder(adapter);
commandBulider.ConflictOption = ConflictOption.OverwriteChanges;
try
{
conn.Open();
//设置批量更新的每次处理条数
adapter.UpdateBatchSize = 5000;
adapter.SelectCommand.Transaction = conn.BeginTransaction();/////////////////开始事务
if (table.ExtendedProperties["SQL"] != null)
{
adapter.SelectCommand.CommandText = table.ExtendedProperties["SQL"].ToString();
}
adapter.Update(table);
adapter.SelectCommand.Transaction.Commit();/////提交事务
}
catch (Exception ex)
{
if (adapter.SelectCommand != null && adapter.SelectCommand.Transaction != null)
{
adapter.SelectCommand.Transaction.Rollback();
}
throw ex;
}
finally
{
conn.Close();
conn.Dispose();
}
}
- 数据库批量数据处理
- C#批量数据处理SqlBulkCopy
- Oracle批量逐条数据处理
- Struts2批量数据处理
- 批量数据处理存储过程模板
- 数据库中的BLOG数据处理
- MySQL数据库大数据处理
- 数据库数据处理故事多
- Oracle数据库之数据处理
- 数据库---使用数据处理函数
- 【数据库-MySql】重复数据处理
- 如何更快地批量数据处理?
- C# DataTable 批量数据处理 增、删、改
- 关于Spring管理Hibernate的批量数据处理
- C# DataTable 批量数据处理 增、删、改
- MySql 批量进行数据处理 存储化
- SqlServer数据库同步数据处理方案
- 海量数据处理之数据库索引
- 跨平台Caffe及I/O模型与并行方案(一)
- Android强制设置横屏或竖屏
- VS 给自己开发的Qt程序加上程序图标ico
- #171 Anagrams
- [struts2入门] StrutsPrepareAndExecuteFilter
- 数据库批量数据处理
- wifi定位
- 数据结构实验之排序六:希尔排序
- JSP内置对象Session小例--用户登录
- 按键处理及外部中断
- 如何在android中制作jar包并调用
- [Struts2入门]MVC模式
- Collection 集合大家族
- BZOJ3236: [Ahoi2013]作业 莫队+分块