如何提高效率SQLite大数据量操作效率

今天有个朋友测试 SQLite，然后得出的结论是：SQLite 效率太低，批量插入1000条记录，居然耗时 2 分钟！using System.Data;
using System.Data.Common;
using System.Data.SQLite;// 创建数据库文件
File.Delete（"test1.db3"）;
SQLiteConnection.CreateFile（"test1.db3"）;DbProviderFactory factory = SQLiteFactory.Instance;
using （DbConnection conn = factory.CreateConnection（））
{
// 连接数据库
conn.ConnectionString = "Data Source=test1.db3";
conn.Open（）; // 创建数据表
string sql = "create table [test1] （[id] INTEGER PRIMARY KEY, [s] TEXT COLLATE NOCASE）";
DbCommand cmd = conn.CreateCommand（）;
cmd.Connection = conn;
cmd.CommandText = sql;
cmd.ExecuteNonQuery（）; // 添加参数
cmd.Parameters.Add（cmd.CreateParameter（））;

// 开始计时
Stopwatch watch = new Stopwatch（）;
watch.Start（）;

// 连续插入1000条记录
for （int i = 0; i < 1000; i++）
{
    cmd.CommandText = "insert into [test1] （[s]） values （？）";
    cmd.Parameters[0].Value = i.ToString（）;    cmd.ExecuteNonQuery（）;
} // 停止计时
watch.Stop（）;
Console.WriteLine（watch.Elapsed）;
}哎~~~~ 一个常识性的错误，我加几行代码（新增代码标记 "// <-------------------"）。
using System.Data;
using System.Data.Common;
using System.Data.SQLite;// 创建数据库文件
File.Delete（"test1.db3"）;
SQLiteConnection.CreateFile（"test1.db3"）;DbProviderFactory factory = SQLiteFactory.Instance;
using （DbConnection conn = factory.CreateConnection（））
{
// 连接数据库
conn.ConnectionString = "Data Source=test1.db3";
conn.Open（）; // 创建数据表
string sql = "create table [test1] （[id] INTEGER PRIMARY KEY, [s] TEXT COLLATE NOCASE）";
DbCommand cmd = conn.CreateCommand（）;
cmd.Connection = conn;
cmd.CommandText = sql;
cmd.ExecuteNonQuery（）; // 添加参数
cmd.Parameters.Add（cmd.CreateParameter（））;

// 开始计时
Stopwatch watch = new Stopwatch（）;
watch.Start（）;

DbTransaction trans = conn.BeginTransaction（）; // <-------------------
try
{
    // 连续插入1000条记录
    for （int i = 0; i < 1000; i++）
    {
      cmd.CommandText = "insert into [test1] （[s]） values （？）";
      cmd.Parameters[0].Value = i.ToString（）;      cmd.ExecuteNonQuery（）;
    }    trans.Commit（）; // <-------------------
}
catch
{
    trans.Rollback（）; // <-------------------
    throw; // <-------------------
} // 停止计时
watch.Stop（）;
Console.WriteLine（watch.Elapsed）;
}执行一下，耗时 0.2 秒。这差距是不是太大了点？为什么只是简单启用了一个事务会有这么大的差距呢？很简单，SQLite 缺省为每个操作启动一个事务，那么原代码 1000 次插入起码开启了 1000 个事务，"事务开启 + SQL 执行 + 事务关闭" 自然耗费了大量的时间，这也是后面显示启动事务后为什么如此快的原因。其实这是数据库操作的基本常识，大家要紧记，不好的代码效率差的不是一点半点。Oracle R12采购接收流程（PR-PO-RCV-AP-Payment）解决安装Oracle数据库报0x7c92e514内存不能为written相关资讯 SQLite教程

SQLite在micro上的移植（12/12/2012 09:49:11）
C++操作SQLite数据库（06/16/2012 07:06:31）
SQLite3 模糊查询（05/17/2012 09:09:34）

Ubuntu 12.04下SQLite数据库简单应（06/20/2012 06:32:08）
SQLite3 安装、基本操作（05/17/2012 09:11:28）
一个小时内学习 SQLite 数据库（05/11/2012 13:01:51）

本文评论查看全部评论（0）