DataTable的数据批量写入数据库
2010-07-30 13:41
417 查看
最近在将excel中的文件导入到数据库中,用程序进行编写,由于数据量较大所以速度很慢,后来采用了SqlBulkCopy类,解决了速度的问题,我就insert语句,sqldataadapter.update(dataset,tablename);sqlbulkcopy.WriteToServer(datatable);三个方法的性能进行比较:
1、生成测试的datatable表,表结构如下:
UniqueID(主键,自动增长) | CompanyName | CompanyCode | Address | Owner | Memo
共6个字段。
2、使用sqlcommand.executenonquery()方法插入
插入20000条记录时间:00:00:29.7336000
3、使用sqldataadapter.update(dataset,tablename);
插入20000条记录时间:00:00:22.8938000
4、使用sqlbulkcopy.writetoserver(datatable)
插入20000条记录时间:00:00:00.3276000
所以说速度是sqlbulkcopy最快,sqldataadapter.update()次之,sqlcommand.ExecuteNonQuery()最慢。
本文来自CSDN博客,转载请标明出处:http://blog.csdn.net/humozhi/archive/2009/03/31/4039868.aspx
sqlbulkcopy属性方法
BatchSize:属性的整数值;或者如果未设置任何值,则为零。每一批次中的行数。在每一批次结束时,将该批次中的行发送到服务器。
BulkCopyTimeOu:超时之前操作完成所允许的秒数。如果操作超时,事务便不会提交,而且所有已复制的行都会从目标表中移除。
ColumnMappings:返回 SqlBulkCopyColumnMapping 项的集合。列映射定义数据源中的列和目标表中的列之间的关系。如果数据源和目标表具有相同的列数,并且数据源中每个源列的序号位置匹配相应目标列的序号位置,则无需 ColumnMappings 集合。但是如果列计数不同,或序号位置不一致,则必须使用 ColumnMappings,以确保将数据复制到正确的列中。
DestinationTableName:指定的目标表中。
NotifyAfter:属性的整数值,或者如果未设置该属性,则为零。定义在生成通知事件之前要处理的行数。
在ColumnMappings属性中,我们可以看到SqlBulkCopyColumnMapping 项,它主要是用来定义SqlBulkCopy实例的数据源中的列与该实例的目标表中的列之间的映射。
1、生成测试的datatable表,表结构如下:
UniqueID(主键,自动增长) | CompanyName | CompanyCode | Address | Owner | Memo
共6个字段。
SqlConnection sqlconnection = new SqlConnection(connectionString); SqlDataAdapter sqldataadapter = new SqlDataAdapter("select * from Table_1 where 1=2", sqlconnection); DataSet dataset = new DataSet(); sqldataadapter.Fill(dataset, "Table_1"); DataTable datatable = dataset.Tables[0]; //生成20000条记录 for (int i = 0; i < 20000; i++) { DataRow datarow = datatable.NewRow(); datarow["CompanyName"] = "companyname"+string.Format("{0:0000}",i); datarow["CompanyCode"] = "companycode" + string.Format("{0:0000}", i); datarow["Address"] = "address" + string.Format("{0:0000}", i); datarow["Owner"] = "owner" + string.Format("{0:0000}", i); datarow["Memo"] = "memo" + string.Format("{0:0000}", i); datatable.Rows.Add(datarow); }
2、使用sqlcommand.executenonquery()方法插入
foreach (DataRow datarow in datatable.Rows) { string sql = "INSERT INTO [Table_1] ([CompanyName],[CompanyCode],[Address],[Owner],[Memo])" + "VALUES('" + datarow["CompanyName"].ToString() + "'" + ",'" + datarow["CompanyCode"].ToString() + "'" + ",'" + datarow["Address"].ToString() + "'" + ",'" + datarow["Owner"].ToString() + "'" + ",'" + datarow["Memo"].ToString() + "')"; using (SqlConnection sqlconn = new SqlConnection(connectionString)) { sqlconn.Open(); SqlCommand sqlcommand = new SqlCommand(sql, sqlconn); sqlcommand.ExecuteNonQuery(); sqlconn.Close(); } }
插入20000条记录时间:00:00:29.7336000
3、使用sqldataadapter.update(dataset,tablename);
SqlCommand insertcommand = new SqlCommand("INSERT INTO [Table_1]([CompanyName],[CompanyCode],[Address],[Owner],[Memo])" + "VALUES(@CompanyName, @CompanyCode,@Address,@Owner,@Memo)",new SqlConnection(connectionString)); insertcommand.Parameters.Add("@CompanyName", SqlDbType.NChar, 50, "CompanyName"); insertcommand.Parameters.Add("@CompanyCode", SqlDbType.NChar, 25, "CompanyCode"); insertcommand.Parameters.Add("@Address", SqlDbType.NChar, 255, "Address"); insertcommand.Parameters.Add("@Owner", SqlDbType.NChar, 25, "Owner"); insertcommand.Parameters.Add("@Memo", SqlDbType.NChar, 255, "Memo"); sqldataadapter.InsertCommand = insertcommand; sqldataadapter.Update(dataset, "Table_1");
插入20000条记录时间:00:00:22.8938000
4、使用sqlbulkcopy.writetoserver(datatable)
SqlBulkCopy sqlbulkcopy = new SqlBulkCopy(connectionString, SqlBulkCopyOptions.UseInternalTransaction); sqlbulkcopy.DestinationTableName = "Table_1";//数据库中的表名 sqlbulkcopy.WriteToServer(dataset.Tables[0]);
插入20000条记录时间:00:00:00.3276000
所以说速度是sqlbulkcopy最快,sqldataadapter.update()次之,sqlcommand.ExecuteNonQuery()最慢。
本文来自CSDN博客,转载请标明出处:http://blog.csdn.net/humozhi/archive/2009/03/31/4039868.aspx
sqlbulkcopy属性方法
BatchSize:属性的整数值;或者如果未设置任何值,则为零。每一批次中的行数。在每一批次结束时,将该批次中的行发送到服务器。
BulkCopyTimeOu:超时之前操作完成所允许的秒数。如果操作超时,事务便不会提交,而且所有已复制的行都会从目标表中移除。
ColumnMappings:返回 SqlBulkCopyColumnMapping 项的集合。列映射定义数据源中的列和目标表中的列之间的关系。如果数据源和目标表具有相同的列数,并且数据源中每个源列的序号位置匹配相应目标列的序号位置,则无需 ColumnMappings 集合。但是如果列计数不同,或序号位置不一致,则必须使用 ColumnMappings,以确保将数据复制到正确的列中。
DestinationTableName:指定的目标表中。
NotifyAfter:属性的整数值,或者如果未设置该属性,则为零。定义在生成通知事件之前要处理的行数。
在ColumnMappings属性中,我们可以看到SqlBulkCopyColumnMapping 项,它主要是用来定义SqlBulkCopy实例的数据源中的列与该实例的目标表中的列之间的映射。
相关文章推荐
- DataTable的数据批量写入数据库
- DataTable的数据批量写入数据库
- DataTable的数据批量写入数据库
- DataTable数据批量写入数据库三种方法比较 以及方法介绍
- DataTable数据批量写入数据库三种方法比较
- [转]DataTable的数据批量写入数据库三种方法比较
- DataTable数据批量写入数据库三种方法比较 以及方法介绍
- DataTable数据批量写入数据库三种方法比较
- dataTable写入数据库(大数据写入)
- 将数据批量写入数据库
- 《项目经验》--简单三层使用DataTable向数据库表批量导入数据---向SqlServer多张张表中导入数据
- 批量写数据---将XML数据批量写入数据库
- 关于以DataTable形式批量写入数据的案例
- 使用SqlBulkCopy将DataTable中的数据批量插入数据库中
- 黑马程序员_筛选DataTable中的数据,批量导入到数据库中
- 使用SqlBulkCopy将DataTable中的数据批量插入数据库中
- DataTable的数据批量写入SQL SERVER数据库方法速度比较[转]
- datatable数据批量倒入数据库
- Python从数据库读取大量数据批量写入文件
- 《项目经验》--简单三层使用DataTable向数据库表批量导入数据---向SqlServer一张表中导入数据