最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

C# DataTable數(shù)據(jù)遍歷優(yōu)化詳解

 更新時(shí)間:2021年01月19日 15:08:39   作者:程序員小站  
這篇文章主要介紹了C# DataTable數(shù)據(jù)遍歷優(yōu)化詳解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧

我們?cè)谶M(jìn)行開發(fā)時(shí),會(huì)經(jīng)常使用DataTable來存儲(chǔ)和操作數(shù)據(jù),我發(fā)現(xiàn)在遍歷DataTable并對(duì)數(shù)據(jù)進(jìn)行刪除和添加操作時(shí)速度非常慢,查閱相關(guān)資料并測(cè)試在添加主鍵后可以使遍歷和操作速度提高很多:

測(cè)試代碼,測(cè)試的是我們向取出來數(shù)據(jù)滿足Flag!=1條件的所有數(shù)據(jù)的后面添加一條數(shù)據(jù)(因?yàn)檫@條數(shù)據(jù)的一些字段值是根據(jù)前面的幾條滿足條件[“AccID='” + accID + “' AND Y='” + year + “' AND AbsID <= ” + absID;]數(shù)據(jù)的值累加得到的)所以需要進(jìn)行整個(gè)DataTable的遍歷來計(jì)算添加:

public static void Test2()
{
 Stopwatch watch = new Stopwatch();
 using (DbConnection conn = SqlHelper.GetConnection("ConnectionString"))
 {
  using (SqlCommand cmd = new SqlCommand())
  {
   watch.Start();
   cmd.CommandText = string.Format(@"
select ROW_NUMBER() OVER (Order by S.AccID,S.CurrID,S.AbsID,S.Flag)AS RowNum,S.* from Test S 
");
   cmd.Connection = conn as SqlConnection;
   cmd.CommandTimeout = 60000;
   conn.Open();
   DataTable table = ExecuteDataTable(cmd);
   watch.Stop();
   Console.WriteLine("從數(shù)據(jù)庫(kù)取出數(shù)據(jù){0}條", table.Rows.Count);
   Stopwatch watch2 = new Stopwatch();
   watch2.Start();
   DataTable newTable = HandleAccYear(table,true);
   watch2.Stop();
   Console.WriteLine("數(shù)據(jù){0},遍歷操作時(shí)間:毫秒:{1},秒:{2}", newTable.Rows.Count, watch2.ElapsedMilliseconds, watch2.ElapsedMilliseconds / 1000);
  }
  conn.Close();
 }
}

填充數(shù)據(jù)到DataTable的方法

public static DataTable ExecuteDataTable(SqlCommand cmd)
{
  DataTable table = new DataTable();
  SqlDataAdapter adaper = new SqlDataAdapter(cmd);
  adaper.Fill(table);
  return table;
}
private static DataTable HandleAccYear(DataTable dt, bool isCurrency)
{
  DataTable newdt = dt.Clone();
  //不使用主鍵
  //dt.PrimaryKey = new DataColumn[] {
  // dt.Columns["AccID"],
  // dt.Columns["Flag"],
  // dt.Columns["AbsID"],
  // dt.Columns["RowNum"],
  //};
  if (dt.Rows.Count > 0)
  {
   object flag = null;
   foreach (DataRow row in dt.Rows)
   {
    flag = row["Flag"];
    if (flag != null && !Helper.AreEqual(flag.ToString(), "1"))
    {
     DataRow newRow = newdt.NewRow();
     DataRow sourceRow = newdt.NewRow();
     sourceRow.ItemArray = row.ItemArray;
     newRow.ItemArray = row.ItemArray;
     string accID = row["AccID"].ToString(),
      year = row["Y"].ToString(),
      absID = row["AbsID"].ToString();
     newRow["Flag"] = "5";
     newRow["SumInfo"] = "測(cè)試數(shù)據(jù)";
     string filter = "AccID='" + accID + "' AND Y='" + year + "' AND AbsID <= " + absID;
     if (!isCurrency)
     {
      filter = "AccID='" + accID + "'AND CurrID='" + row["CurrID"] + "' AND Y='" + year + "' AND AbsID <= " + absID;
     }
     DataRow[] selectRow = dt.Select(filter);
     double debitLC = 0, debitQty = 0, creditLC = 0, creditQty = 0, debitFC = 0, creditFC = 0;
     foreach (DataRow item in selectRow)
     {
      debitLC += ToDouble(item["YearDebitLC"]);
      debitQty += ToDouble(item["YearDebitQty"]);
      creditLC +=ToDouble(item["YearCreditLC"]);
      creditQty += ToDouble(item["YearCreditQty"]);
      if (!isCurrency)
      {
       debitFC += ToDouble(item["YearDebitFC"]);
       creditFC += ToDouble(item["YearCreditFC"]);
      }
     }
     newRow["CurDebitLC"] = debitLC;
     newRow["CurDebitQty"] = debitQty;
     newRow["CurCreditLC"] = creditLC;
     newRow["CurCreditQty"] = creditQty;
     //newRow["CurDebitLC"] = dt.Compute("Sum(YearDebitLC)", filter);
     //newRow["CurDebitQty"] = dt.Compute("Sum(YearDebitQty)", filter);
     //newRow["CurCreditLC"] = dt.Compute("Sum(YearCreditLC)", filter);
     //newRow["CurCreditQty"] = dt.Compute("Sum(YearCreditQty)", filter);
     if (!isCurrency)
     {
      //newRow["CurCreditFC"] = dt.Compute("Sum(YearCreditFC)", filter);
      //newRow["CurDebitFC"] = dt.Compute("Sum(YearDebitFC)", filter);
      newRow["CurCreditFC"] = creditFC;
      newRow["CurDebitFC"] = debitFC;
     }
     newdt.Rows.Add(sourceRow);
     newdt.Rows.Add(newRow);
    }
    else
    {
     DataRow sourceRow = newdt.NewRow();
     sourceRow.ItemArray = row.ItemArray;
     newdt.Rows.Add(sourceRow);
    }
   }
  }
  return newdt;
 }

當(dāng)不使用主鍵進(jìn)行遍歷計(jì)算插入相應(yīng)的值時(shí)所用時(shí)間竟然是這么多:

當(dāng)我使用同樣的方法,同樣的數(shù)據(jù)添加主鍵(即把HandleAccYear方法中不使用主鍵下面的注釋去掉后).進(jìn)行遍歷計(jì)算等操作,得出的結(jié)果竟然有這么大的差別:

補(bǔ)充:C# DataTable數(shù)據(jù)量大,循環(huán)處理數(shù)據(jù)的時(shí)候優(yōu)化速度

相信大家用for循環(huán)datatable數(shù)據(jù)的不會(huì)太少,這個(gè)在數(shù)據(jù)量比較小的時(shí)候可以接受,但是數(shù)據(jù)量大的時(shí)候卻會(huì)造成CPU占用過高,甚至把電腦資源耗盡卡死至無限等待,

其實(shí)一些循環(huán)耗時(shí)的操作可以用線程池分塊來處理,這樣會(huì)減輕CPU很多壓力,好比食堂打飯,當(dāng)只有一個(gè)窗口的時(shí)候勢(shì)必等待的時(shí)間會(huì)非常的長(zhǎng),但是多開幾個(gè)窗口的時(shí)候卻大大提高效率,

C#中用線程池就可以做到,本來一開始的時(shí)候我用的是為每個(gè)區(qū)塊開一個(gè)線程,但是有一個(gè)問題就是開了那么多的線程沒辦法結(jié)束他們,后來我想到了線程池,

具體代碼如下:

int sid = dt.Rows.Count % 100 == 0 ? (dt.Rows.Count / 100) : (dt.Rows.Count / 100 + 1);
    for (int a = 1; a <= sid; a++)
    {
     object aa=a.ToString() + "," + sid.ToString();
     ThreadPool.QueueUserWorkItem(todo
      , aa);
    }
 public void todo(object aa)
 {
  string sql = "";
  int startindex = Convert.ToInt32(aa.ToString().Split(',')[0]);
  int limitstep = Convert.ToInt32(aa.ToString().Split(',')[1]);
  for (int i = (startindex > 1 ? ((startindex - 1) * 100) : 0); i < (startindex == limitstep ? (dt.Rows.Count) : startindex*100); i++)
  {
   //todo數(shù)據(jù)操作
  }
  Thread.Sleep(2000);
 }

以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教。

相關(guān)文章

  • C#刪除文件夾和文件到回收站示例

    C#刪除文件夾和文件到回收站示例

    本文介紹了C#刪除文件和文件夾到回收站的方法,平時(shí)都是使用File.Delete方法刪除文件,這樣刪除之后就真沒有了。下面的代碼可以將文件刪除放到回收站里
    2014-01-01
  • C#文件和字節(jié)流的轉(zhuǎn)換方法

    C#文件和字節(jié)流的轉(zhuǎn)換方法

    這篇文章主要介紹了C#文件和字節(jié)流的轉(zhuǎn)換方法,涉及C#將文件以字節(jié)流形式讀取及將字節(jié)流寫入文件的相關(guān)技巧,需要的朋友可以參考下
    2015-05-05
  • C# 導(dǎo)出Excel的6種簡(jiǎn)單方法實(shí)現(xiàn)

    C# 導(dǎo)出Excel的6種簡(jiǎn)單方法實(shí)現(xiàn)

    C# 導(dǎo)出 Excel 的6種簡(jiǎn)單方法:數(shù)據(jù)表導(dǎo)出到 Excel,對(duì)象集合導(dǎo)出到 Excel,數(shù)據(jù)庫(kù)導(dǎo)出到 Excel,微軟網(wǎng)格控件導(dǎo)出到 Excel,數(shù)組導(dǎo)出到 Excel,CSV 導(dǎo)出到 Excel,你都會(huì)了嗎?需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-09-09
  • 利用AOP實(shí)現(xiàn)SqlSugar自動(dòng)事務(wù)

    利用AOP實(shí)現(xiàn)SqlSugar自動(dòng)事務(wù)

    這篇文章主要為大家詳細(xì)介紹了利用AOP實(shí)現(xiàn)SqlSugar自動(dòng)事務(wù),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2017-10-10
  • C#實(shí)現(xiàn)數(shù)字華容道游戲

    C#實(shí)現(xiàn)數(shù)字華容道游戲

    這篇文章主要為大家詳細(xì)介紹了C#實(shí)現(xiàn)數(shù)字華容道游戲,文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2022-02-02
  • c# 免費(fèi)組件html轉(zhuǎn)pdf的實(shí)現(xiàn)過程

    c# 免費(fèi)組件html轉(zhuǎn)pdf的實(shí)現(xiàn)過程

    這篇文章主要介紹了c# 免費(fèi)組件html轉(zhuǎn)pdf的實(shí)現(xiàn)過程,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2022-06-06
  • C#面向?qū)ο缶幊袒A(chǔ)概念匯總

    C#面向?qū)ο缶幊袒A(chǔ)概念匯總

    今天小編就為大家分享一篇關(guān)于C#面向?qū)ο缶幊袒A(chǔ)概念匯總的文章,小編覺得內(nèi)容挺不錯(cuò)的,現(xiàn)在分享給大家,具有很好的參考價(jià)值,需要的朋友一起跟隨小編來看看吧
    2018-10-10
  • C#使用正則表達(dá)式實(shí)現(xiàn)常見的格式驗(yàn)證

    C#使用正則表達(dá)式實(shí)現(xiàn)常見的格式驗(yàn)證

    這篇文章主要為大家詳細(xì)介紹了C#如何使用正則表達(dá)式實(shí)現(xiàn)常見的格式驗(yàn)證,例如:電話號(hào)碼、密碼、郵編等,感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下
    2024-01-01
  • c#中directory 和directoryinfo的使用小結(jié)

    c#中directory 和directoryinfo的使用小結(jié)

    當(dāng)使用C#處理目錄時(shí),可以使用?System.IO?命名空間中的?Directory?和?DirectoryInfo?類來執(zhí)行各種目錄操作,本文主要介紹了c#中directory 和directoryinfo的使用小結(jié),感興趣的可以了解一下
    2024-02-02
  • 詳解如何選擇使用ArrayList、HashTable、List、Dictionary數(shù)組

    詳解如何選擇使用ArrayList、HashTable、List、Dictionary數(shù)組

    本文詳細(xì)介紹了ArrayList、HashTable、List、Dictionary的用法,以及什么情況選用該數(shù)組,以便提高開發(fā)效率。希望對(duì)大家有所幫助
    2016-11-11

最新評(píng)論

吉木乃县| 海门市| 邻水| 昭觉县| 阳西县| 金湖县| 思南县| 阳谷县| 台南市| 广昌县| 保山市| 西青区| 嘉义县| 逊克县| 苏州市| 上高县| 南江县| 定兴县| 河西区| 长白| 鲁山县| 嘉禾县| 鲁山县| 老河口市| 秦安县| 绥化市| 肃南| 阳城县| 洛扎县| 平江县| 贵南县| 南汇区| 宾川县| 南平市| 江口县| 盘锦市| 福安市| 宁明县| 元江| 冷水江市| 乌拉特后旗|