ADO.NET 大数据上传的利器 SqlBulkCopy

来源:互联网 发布:wps的数据分析在哪里 编辑:程序博客网 时间:2024/06/06 01:55

今天在网上看到有人解决EXCEL大数据量插入sqlserver数据库的方法,用了一个SqlBulkCopy。后来研究了一下,50万条数据插入数据库用了13秒。500万数据用时5分钟。


 public string Init()        {            DataColumn dr_ID = new DataColumn("ID", System.Type.GetType("System.String"));            dt.Columns.Add(dr_ID);            DataColumn dr_TableName = new DataColumn("TableName", System.Type.GetType("System.String"));            dt.Columns.Add(dr_TableName);            DataColumn dr_isShow = new DataColumn("isShow", System.Type.GetType("System.Boolean"));                        dt.Columns.Add(dr_isShow);            for (int i = 0; i < tableCount; i++)            {                DataRow dr = dt.NewRow();                dr["ID"] = i;                dr["TableName"] = i + "Sqlbulkcopy";                dr["isShow"] = true;                dt.Rows.Add(dr);            }            string temp = string.Empty;            temp = DateTime.Now.ToString();            sqlBulk();            temp += "|" + DateTime.Now.ToString();            return temp;        }
上面这个方法是在内存中生成数据内存表。

public void sqlBulk()        {            ConnectionNew.Open();            SqlBulkCopy bulkCopy = new SqlBulkCopy(ConnectionNew);            bulkCopy.BulkCopyTimeout = 50000;            bulkCopy.DestinationTableName = "Sqlbulkcopy";            bulkCopy.NotifyAfter = 500;            bulkCopy.SqlRowsCopied += bulkCopy_SqlRowsCopied;            bulkCopy.WriteToServer(dt);            ConnectionNew.Close();        }

这是具体用SqlBulkCopy的具体方法,用法很简单。大家可以去网上看一看资料,这里只是简单的记录下。

原创粉丝点击