Android下SQLite数据库一条条地插入记录太慢了
Android下SQLite数据库一条条地插入记录太慢了，1000条记录要30来秒时间，怎么改进？
今天有个朋友测试 SQLite，然后得出的结论是：SQLite 效率太低，批量插入1000条记录，居然耗时 2 分钟！ 下面是他发给我的测试代码。我晕~~~~~~ using System.Data; using System.Data.Common; using System.Data.SQLite; // 创建数据库文件 File.Delete("test1.db3"); SQLiteConnection.CreateFile("test1.db3"); DbProviderFactory factory = SQLiteFactory.Instance; using (DbConnection conn = factory.CreateConnection()) { // 连接数据库 conn.ConnectionString = "Data Source=test1.db3"; conn.Open(); // 创建数据表 string sql = "create table [test1] ([id] INTEGER PRIMARY KEY, [s] TEXT COLLATE NOCASE)"; DbCommand cmd = conn.CreateCommand(); cmd.Connection = conn; cmd.CommandText = sql; cmd.ExecuteNonQuery(); // 添加参数 cmd.Parameters.Add(cmd.CreateParameter()); // 开始计时 Stopwatch watch = new Stopwatch(); watch.Start(); // 连续插入1000条记录 for (int i = 0; i < 1000; i++) { cmd.CommandText = "insert into [test1] ([s]) values (?)"; cmd.Parameters[0].Value = i.ToString(); cmd.ExecuteNonQuery(); } // 停止计时 watch.Stop(); Console.WriteLine(watch.Elapsed); } 哎~~~~ 一个常识性的错误，我加几行代码 (新增代码标记 "// <-------------------")。 using System.Data; using System.Data.Common; using System.Data.SQLite; // 创建数据库文件 File.Delete("test1.db3"); SQLiteConnection.CreateFile("test1.db3"); DbProviderFactory factory = SQLiteFactory.Instance; using (DbConnection conn = factory.CreateConnection()) { // 连接数据库 conn.ConnectionString = "Data Source=test1.db3"; conn.Open(); // 创建数据表 string sql = "create table [test1] ([id] INTEGER PRIMARY KEY, [s] TEXT COLLATE NOCASE)"; DbCommand cmd = conn.CreateCommand(); cmd.Connection = conn; cmd.CommandText = sql; cmd.ExecuteNonQuery(); // 添加参数 cmd.Parameters.Add(cmd.CreateParameter()); // 开始计时 Stopwatch watch = new Stopwatch(); watch.Start(); DbTransaction trans = conn.BeginTransaction(); // <------------------- try { // 连续插入1000条记录 for (int i = 0; i < 1000; i++) { cmd.CommandText = "insert into [test1] ([s]) values (?)"; cmd.Parameters[0].Value = i.ToString(); cmd.ExecuteNonQuery(); } trans.Commit(); // <------------------- } catch { trans.Rollback(); // <------------------- throw; // <------------------- } // 停止计时 watch.Stop(); Console.WriteLine(watch.Elapsed); } 执行一下，耗时 0.2 秒。这差距是不是太大了点？ 为什么只是简单启用了一个事务会有这么大的差距呢
使用SQLite提供的事务方式操作数据库。使用事务机制时，1000条记录只有1个I/O操作，不使用事务机制时是1000个I/O操作，一个IO操作算25毫秒的话，那么1000个I/O操作就是25秒了。所以1000条记录使用事务操作比不使用事务操作省了25秒
sqlite,sqlite3_exec执行事务批量更新记录 2009-02-04 17:19 sqlite3 *db; sqlite3_open(theApp.getDB_fullPath(), &db); sqlite3_exec(db,"BEGIN TRANSACTION",0,0,0); sqlite3_exec(db,"update tabConfFeichengRen set value="+yingEr+" where type='yingEr'",0,0,0); sqlite3_exec(db,"update tabConfFeichengRen set value="+erTong+" where type='erTong'",0,0,0); sqlite3_exec(db,"update tabConfFeichengRen set value="+erTongJiaChuang+" where type='erTongJiaChuang'",0,0,0); int rc=sqlite3_exec(db,"COMMIT",0,0,0); if(rc!=SQLITE_OK) { AfxMessageBox("出错!"); } else{ AfxMessageBox("OK!"); } sqlite3_close(db);