日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 运维知识 > 数据库 >内容正文

数据库

使用事务操作SQLite数据批量插入,提高数据批量写入速度,源码讲解

發(fā)布時(shí)間:2024/9/20 数据库 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 使用事务操作SQLite数据批量插入,提高数据批量写入速度,源码讲解 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

SQLite數(shù)據(jù)庫(kù)作為一般單機(jī)版軟件的數(shù)據(jù)庫(kù),是非常優(yōu)秀的,我目前單機(jī)版的軟件產(chǎn)品線基本上全部替換Access作為優(yōu)選的數(shù)據(jù)庫(kù)了,在開(kāi)發(fā)過(guò)程中,有時(shí)候需要批量寫(xiě)入數(shù)據(jù)的情況,發(fā)現(xiàn)傳統(tǒng)的插入數(shù)據(jù)模式非常慢,幾千條數(shù)據(jù)的寫(xiě)入或者更新可能需要好幾分鐘時(shí)間,而SqlServer則相同的操作可能幾秒即可,有無(wú)更好的方法來(lái)提高它的響應(yīng)速度呢?答案是有的,就是采用事務(wù)提交,默認(rèn)SQLite的數(shù)據(jù)庫(kù)插入操作,如果沒(méi)有采用事務(wù)的話,它每次寫(xiě)入提交,就會(huì)觸發(fā)一次事務(wù)操作,而這樣幾千條的數(shù)據(jù),就會(huì)觸發(fā)幾千個(gè)事務(wù)的操作,這就是時(shí)間耗費(fèi)的根源。本文通過(guò)詳細(xì)代碼介紹如何使用事務(wù)來(lái)提高整個(gè)批量插入數(shù)據(jù)的速度,并以實(shí)際的Winform開(kāi)發(fā)框架中的字典管理模塊的批量插入功能來(lái)進(jìn)行介紹,通過(guò)前后速度的對(duì)比,使得事務(wù)操作提高響應(yīng)速度更有說(shuō)服力。

為了提高響應(yīng)速度,我這里使用了事務(wù)操作,整個(gè)事務(wù)操作是基于EnterpriseLibray類庫(kù)的數(shù)據(jù)庫(kù)操作,由于我已經(jīng)在框架的基類中做了封裝,因此我們這里看到整個(gè)處理過(guò)程即可。

其中MyRegion里面的代碼就是遍歷每行的數(shù)據(jù),構(gòu)造數(shù)據(jù)字典對(duì)象和排序號(hào),然后調(diào)用InsertDictData函數(shù)進(jìn)行數(shù)據(jù)的錄入。其中InsertDictData函數(shù)的代碼是

/// <summary>/// 使用事務(wù)參數(shù),插入數(shù)據(jù),最后統(tǒng)一提交事務(wù)處理/// </summary>/// <param name="dictData">字典數(shù)據(jù)</param>/// <param name="seq">排序</param>/// <param name="trans">事務(wù)對(duì)象</param>private void InsertDictData(string dictData, string seq, DbTransaction trans){if (!string.IsNullOrWhiteSpace(dictData)){DictDataInfo info = new DictDataInfo();info.Editor = LoginID;info.LastUpdated = DateTime.Now;info.DictType_ID = this.txtDictType.Tag.ToString();info.Name = dictData.Trim();info.Value = dictData.Trim();info.Remark = this.txtNote.Text.Trim();info.Seq = seq;bool succeed = BLLFactory<DictData>.Instance.Insert(info, trans);}}

整個(gè)插入功能按鈕的處理全部代碼如下所示。

private void btnOK_Click(object sender, EventArgs e){string[] arrayItems = this.txtDictData.Lines;int intSeq = -1;int seqLength = 3;string strSeq = this.txtSeq.Text.Trim();if (int.TryParse(strSeq, out intSeq)){seqLength = strSeq.Length;}if (arrayItems != null && arrayItems.Length > 0){DbTransaction trans = BLLFactory<DictData>.Instance.CreateTransaction();if (trans != null){try{#region MyRegionforeach (string strItem in arrayItems){if (this.radSplit.Checked){if (!string.IsNullOrWhiteSpace(strItem)){string[] dataItems = strItem.Split(new char[] { ',', ',', ';', ';', '/', '、' });foreach (string dictData in dataItems){#region 保存數(shù)據(jù)string seq = "";if (intSeq > 0){seq = (intSeq++).ToString().PadLeft(seqLength, '0');}else{seq = string.Format("{0}{1}", strSeq, intSeq++);}InsertDictData(dictData, seq, trans);#endregion}}}else{#region 保存數(shù)據(jù)if (!string.IsNullOrWhiteSpace(strItem)){string seq = "";if (intSeq > 0){seq = (intSeq++).ToString().PadLeft(seqLength, '0');}else{seq = string.Format("{0}{1}", strSeq, intSeq++);}InsertDictData(strItem, seq, trans);}#endregion}}#endregiontrans.Commit();ProcessDataSaved(this.btnOK, new EventArgs());MessageDxUtil.ShowTips("保存成功");this.DialogResult = DialogResult.OK;}catch (Exception ex){trans.Rollback();LogTextHelper.Error(ex);MessageDxUtil.ShowError(ex.Message);}}}}

上面的批量插入,經(jīng)過(guò)前后的測(cè)試,2千條數(shù)據(jù)批量插入SQLite數(shù)據(jù)庫(kù),需要大概3~4分鐘左右,如果采用了事務(wù)操作,則在1~2秒內(nèi)寫(xiě)入完成,速度提高不知道多少倍。如果是操作數(shù)據(jù)比較多的,強(qiáng)烈建議使用事務(wù)進(jìn)行操作,可以給客戶很好的體驗(yàn)效果。

如果嫌上面的代碼復(fù)雜,可以看下面的講解代碼可能就明白了

using (DbTransaction dbTrans = conn.BeginTransaction()){using (DbCommand cmd = conn.CreateCommand()){cmd.CommandText = "INSERT INTO MyTable(MyValue) VALUES(?)";DbParameter Field1 = cmd.CreateParameter();cmd.Parameters.Add(Field1);for (int n = 0; n < 100000; n++){Field1.Value = n + 100000;cmd.ExecuteNonQuery();}}}

上面是一種比較簡(jiǎn)單原始的事務(wù)操作,如果批量插入數(shù)據(jù),同樣能夠起到一樣的效果。

總結(jié)

以上是生活随笔為你收集整理的使用事务操作SQLite数据批量插入,提高数据批量写入速度,源码讲解的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。