C# Excel检验数据是否重复及Table检验数据是否重复
2015-10-19 16:56
801 查看
最近在做导入Excel数据的时候,要检验数据是否重复:
1、要检验Excel数据本身是否有重复?
2、Excel中的数据是否与数据库中的数据重复?
一、检验Excel中数据是否重复的方式有:
1、将Table中的数据使用select语句来过滤(此处略,可以参考二)。
2、使用for循环来手动核对,代码如下:
#region 记录Excel中的重复列
/// <summary>
/// 记录Excel中的重复列
/// </summary>
/// <param name="dt">需要获取重复列的表</param>
/// URL:http://www.bianceng.cn/Programming/csharp/201410/45747.htm
/// <returns>提示重复信息</returns>
private string GetDistinctTable(DataTable dt)
{
//DataTable dtClone = dt;这种方式是错误的,因为这种情况,修改dtClone的同时dt也会被修改。
DataTable dtClone = dt.Clone(); ;
string vsSubAcctNo = string.Empty;
string vsAcctNo = string.Empty;
string repeatExcel = string.Empty;
string vsTransDate = string.Empty;
for (int i = dtClone.Rows.Count - 1; i >= 0; i--)
{
vsSubAcctNo = dtClone.Rows[i][4].ToString().Trim();
vsAcctNo = dtClone.Rows[i][1].ToString().Trim();
vsTransDate = dtClone.Rows[i][8].ToString().Trim();
dtClone.Rows[i].Delete();
dtClone.AcceptChanges();
for (int j = dtClone.Rows.Count - 1; j >= 0; j--)
{
if (vsSubAcctNo == dtClone.Rows[j][4].ToString().Trim() && vsAcctNo == dtClone.Rows[j][1].ToString().Trim() && vsTransDate == dtClone.Rows[j][8].ToString().Trim())
{
//如果重复了,进行记录
repeatExcel += "第" + (i + 1).ToString() + "行\r\n";
break;
}
}
}
return repeatExcel;
}
#endregion
二、检验Excel中数据是否与数据库中数据重复的方式有:
1、遍历Table并将其中每条数据,在数据库中检验重复。
这种方式适用于Table中数据比较少(100以内),而数据库中要对比表很大的情况。因为这种方式要每对比一条数据,都要连接数据库,并执行查询,很费时间。
大体测试了一下,Excel中有2000条数据,仅仅在数据库中查询,就消耗了7分40秒即4601000 毫秒(ms),大约一条数据耗时:2300.5毫秒
其实,使用方式2导入2000条,耗时也比方式1导入100条,耗时少。
2、将数据库中要对比的表数据取到一个dataset中,遍历Table并将其中每条数据,在dataset中检验重复,代码如下:
from: http://www.bianceng.cn/Programming/csharp/201410/45747.htm
1、要检验Excel数据本身是否有重复?
2、Excel中的数据是否与数据库中的数据重复?
一、检验Excel中数据是否重复的方式有:
1、将Table中的数据使用select语句来过滤(此处略,可以参考二)。
2、使用for循环来手动核对,代码如下:
#region 记录Excel中的重复列
/// <summary>
/// 记录Excel中的重复列
/// </summary>
/// <param name="dt">需要获取重复列的表</param>
/// URL:http://www.bianceng.cn/Programming/csharp/201410/45747.htm
/// <returns>提示重复信息</returns>
private string GetDistinctTable(DataTable dt)
{
//DataTable dtClone = dt;这种方式是错误的,因为这种情况,修改dtClone的同时dt也会被修改。
DataTable dtClone = dt.Clone(); ;
string vsSubAcctNo = string.Empty;
string vsAcctNo = string.Empty;
string repeatExcel = string.Empty;
string vsTransDate = string.Empty;
for (int i = dtClone.Rows.Count - 1; i >= 0; i--)
{
vsSubAcctNo = dtClone.Rows[i][4].ToString().Trim();
vsAcctNo = dtClone.Rows[i][1].ToString().Trim();
vsTransDate = dtClone.Rows[i][8].ToString().Trim();
dtClone.Rows[i].Delete();
dtClone.AcceptChanges();
for (int j = dtClone.Rows.Count - 1; j >= 0; j--)
{
if (vsSubAcctNo == dtClone.Rows[j][4].ToString().Trim() && vsAcctNo == dtClone.Rows[j][1].ToString().Trim() && vsTransDate == dtClone.Rows[j][8].ToString().Trim())
{
//如果重复了,进行记录
repeatExcel += "第" + (i + 1).ToString() + "行\r\n";
break;
}
}
}
return repeatExcel;
}
#endregion
二、检验Excel中数据是否与数据库中数据重复的方式有:
1、遍历Table并将其中每条数据,在数据库中检验重复。
这种方式适用于Table中数据比较少(100以内),而数据库中要对比表很大的情况。因为这种方式要每对比一条数据,都要连接数据库,并执行查询,很费时间。
大体测试了一下,Excel中有2000条数据,仅仅在数据库中查询,就消耗了7分40秒即4601000 毫秒(ms),大约一条数据耗时:2300.5毫秒
其实,使用方式2导入2000条,耗时也比方式1导入100条,耗时少。
2、将数据库中要对比的表数据取到一个dataset中,遍历Table并将其中每条数据,在dataset中检验重复,代码如下:
strTemp = "AcctNo='" + obZH.ToString() + "' and TransDate='" + obRQ.ToString() + "' and SubAcctNo='" + obDFZH.ToString() + "'"; rowsTemp = dsTemp.Tables[0].Select(strTemp); if (rowsTemp.Length>0) { //如果重复了,进行记录 repeatDj += "第" + v.ToString() + "行\r\n"; }
from: http://www.bianceng.cn/Programming/csharp/201410/45747.htm
相关文章推荐
- c#中异步编程
- 在C#中创建和读取XML文件
- 字符串公式解析器——使用“逆波兰式算法”及C#实现
- C#接口之IEnumerable,IEnumerator
- C#项目实战-实现一个多线程端口扫描器
- 【工作记录0014】C#"该行已经属于另一个表"解决方法
- C# Winform 界面中各控件随着窗口大小变化
- 修饰模式(Decorator结构化)C#简单的例子
- C#中 ListView控件行高的巧妙设置
- C#语法中一个问号(?)与两个问号(??)有什么区别
- C#
- C#中使用ListView动态添加数据不闪烁
- C#文件写入
- C#时间戳
- C#委托的介绍(delegate、Action、Func、predicate)
- C#学习日记26---接口(interface)类型
- 使用C#和Thrift来访问Hbase实例
- C#基础巩固(2)-Linq To XML创建XML
- C# 5.0 与 .Net 4.5 学习(一)Race Conditions资源竞争
- C#可以自动在后台为属性创建字段