閱讀769 返回首頁    go 阿裏雲 go 技術社區[雲棲]


C# Excel數據驗重及Table數據驗重

最近在做導入Excel數據的時候,要檢驗數據是否重複:
        1、要檢驗Excel數據本身是否有重複?

        2、Excel中的數據是否與數據庫中的數據重複?

一、檢驗Excel中數據是否重複的方式有:
        1、將Table中的數據使用select語句來過濾(此處略,可以參考二)。
        2、使用for循環來手動核對,代碼如下:

       #region  記錄Excel中的重複列
        /// <summary>
        /// 記錄Excel中的重複列
        /// </summary>
        /// <param name="dt">需要獲取重複列的表</param>
        /// <returns>提示重複信息</returns>
        private string GetDistinctTable(DataTable dt)
        {
		    //DataTable dtClone = dt;這種方式是錯誤的,因為這種情況,修改dtClone的同時dt也會被修改。
            DataTable dtClone = dt.Clone(); ;
            string vsSubAcctNo = string.Empty;
            string vsAcctNo = string.Empty;
            string repeatExcel = string.Empty;
            string vsTransDate = string.Empty;
            for (int i = dtClone.Rows.Count - 1; i >= 0; i--)
            {
                vsSubAcctNo = dtClone.Rows[i][4].ToString().Trim();
                vsAcctNo = dtClone.Rows[i][1].ToString().Trim();
                vsTransDate = dtClone.Rows[i][8].ToString().Trim();
                dtClone.Rows[i].Delete();
                dtClone.AcceptChanges();
                for (int j = dtClone.Rows.Count - 1; j >= 0; j--)
                {
                    if (vsSubAcctNo == dtClone.Rows[j][4].ToString().Trim() && vsAcctNo == dtClone.Rows[j][1].ToString().Trim() && vsTransDate == dtClone.Rows[j][8].ToString().Trim())
                    {
                        //如果重複了,進行記錄
                        repeatExcel += "第" + (i + 1).ToString() + "行\r\n";
                        break;
                    }
                }
            }
            return repeatExcel;
        }
        #endregion

小注:

clone應該修改為為copy

二、檢驗Excel中數據是否與數據庫中數據重複的方式有:

       1、遍曆Table並將其中每條數據,在數據庫中檢驗重複。
        這種方式適用於Table中數據比較少(100以內),而數據庫中要對比表很大的情況。因為這種方式要每對比一條數據,都要連接數據庫,並執行查詢,很費時間。
        大體測試了一下,Excel中有2000條數據,僅僅在數據庫中查詢,就消耗了7分40秒即4601000 毫秒(ms),大約一條數據耗時:2300.5毫秒
        其實,使用方式2導入2000條,耗時也比方式1導入100條,耗時少。
        2、將數據庫中要對比的表數據取到一個dataset中,遍曆Table並將其中每條數據,在dataset中檢驗重複,代碼如下:

	         strTemp = "AcctNo='" + obZH.ToString() + "' and TransDate='" + obRQ.ToString() + "'  and SubAcctNo='" + obDFZH.ToString() + "'";
                    rowsTemp = dsTemp.Tables[0].Select(strTemp);
                    if (rowsTemp.Length>0)
                    {
                        //如果重複了,進行記錄
                        repeatDj += "第" + v.ToString() + "行\r\n";
                    } 




最後更新:2017-04-03 20:19:30

  上一篇:go 機房收費係統之導出為Excel
  下一篇:go Storm專題一、Storm DRPC 分布式計算