SQLite的性能优化

最新推荐文章于 2025-04-23 08:43:18 发布

gnimgnot

最新推荐文章于 2025-04-23 08:43:18 发布

阅读量3.3k

点赞数

分类专栏： SQLite

本文链接：https://blog.csdn.net/cuit/article/details/21971225

版权

SQLite 专栏收录该内容

4 篇文章

订阅专栏

SQLite的插入速度一直被人指责，而其实它是可以优化的。

并且没经过优化的代码和优化过的差距甚大，比如插入30万条数据，没经过优化可能需要1个小时甚至更长，而经过优化可能不超过10秒。

要做好优化，就需要对SQLite的机制有所了解。

下面是一些性能优化的tips，尤其是第一条。

1，开启整体事务

SQLite在执行一条SQL语句的时候，会默认开启一个事务，所以要写个for循环插入30万条数据的话，就要执行30万次事务，也就是30万次IO操作，这是很夸张的。

所以在做批量插入操作的时候，务必要开启一个整体事务，也就是像这样：

Begin Transaction

Insert operation 1

Insert operation 2

Insert operation 3

Insert operation n

...

End Transaction

而不是开启N次事务：

Begin Transaction

Insert operation 1

End Transaction

Begin Transaction

Insert operation 2

End Transaction

Begin Transaction

Insert operation 3

End Transaction

Begin Transaction

Insert operation n

End Transaction

2，使用sqlite3_prepare_v2编译好sql语句再执行

3，使用PRAGMA synchronous = OFF

关闭同步，这样的话如果设备突然断电的时候，数据会丢失。

4，PRAGMA journal_mode = MEMORY

让分页文件在内存中，缺点同3.

5，先批量插入完再建索引，如果数据量过大可能得先drop索引

6，尽量少用子查询，少用多表联查

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

gnimgnot

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

SQLite研究——性能优化

wzwind的专栏

11-25

3286

SQLite研究——性能优化 作者：JD Space 来源：www.sqlite.com.cn 时间：2006-11-24 【字体：大中小】〖双击滚屏〗

SQLite 调试与性能优化指南

Programming Talk

01-05

1649

在前几篇文章中，我们深入了解了 SQLite 的基础和高级功能，以及如何利用其扩展能力。本篇文章将重点讲解 SQLite 的调试工具和性能优化技巧，以帮助您解决常见问题并进一步提升数据库性能。

参与评论您还未登录，请先登录后发表或查看评论

SQLite3的性能优化

11-11

主要讲述在嵌入式中使用SQLite3时，对相关的数据库的性能如何优化的问题

SQLite 规模化实战：掌控百万级数据集的性能极限

最新发布

码觉客的博客

04-23

937

SQLite。提及这个名字，人们往往联想到驱动移动应用或简单桌面工具的小型嵌入式数据库。它以其简洁、可靠和零配置的特性而闻名。但当“小规模”成为过去式，当你的应用程序数据量激增，跨越的门槛时，会发生什么？SQLite 会在压力下崩溃，迫使你迁移到更重的客户端/服务器数据库系统吗？令人惊讶的是，对于许多场景而言，答案是的。SQLite 拥有非凡且常被低估的能力，足以高效处理庞大的数据集。然而，释放这种潜力并非唾手可得，它需要对 SQLite 的架构有深刻理解，并有策略地应用高级优化技术。

SQLite 索引：优化查询性能的 7 大技巧，你 Get 到了吗？

java专栏

02-22

1059

索引是一种特殊的数据结构，用于快速查找数据库表中的特定数据。通过索引，数据库引擎可以更快地找到满足查询条件的数据，而不必扫描整个表。通过本文的介绍，相信你已经对 SQLite 索引的优化技巧有了深入的了解。每一步都有详细的代码示例和注释，帮助你更好地理解和应用。下次优化查询性能时，不妨试试这些方法，你会发现它们不仅功能强大，而且使用起来也非常方便哦！🌟希望本文对你有所帮助，如果有任何问题或建议，欢迎留言交流！😊。

SQLite 优化措施

My_wife_QBL的博客

07-26

1289

SQLite 是一个功能强大且灵活的嵌入式数据库，但在处理大量数据和高并发操作时，性能优化非常重要。通过合理设计数据库结构、优化查询性能、采取有效的数据操作策略、调整 SQLite 配置以及定期进行数据管理和维护，可以显著提高 SQLite 的性能。希望本文提供的优化措施能够帮助开发者在实际应用中提升 SQLite 的性能，为用户提供更好的体验。随着数据量的增加和应用需求的变化，持续关注和优化数据库性能将是开发者的重要任务。

SQLite 性能优化实例分享

12-16

通过上述优化，开发者成功地解决了性能问题，但同时也提醒我们，对于数据库性能优化，不仅要关注代码层面的改进，还要考虑硬件环境、数据库设计和使用场景等因素。在实际项目中，应当根据具体情况进行综合优化，确保...

Android开发环境中的SQLite性能优化.pdf

09-22

"Android开发环境中的SQLite性能优化" 在 Android 开发环境中，SQLite 是一个非常流行的嵌入式数据库管理系统。为了提高 SQLite 的性能和资源占用，我们可以通过两种方法进行优化：使用事务和使用索引。首先，让...

C# SQLite执行效率的优化教程

08-27

C# SQLite执行效率优化教程本文主要介绍了关于C# SQLite执行效率优化的相关资料，通过示例代码介绍的非常详细，对大家学习或者使用C# SQLite具有一定的参考学习价值。一、SQLite简介 SQLite是一款轻型的嵌入式...

SQLite的基本优化方法

太阳风

10-29

573

SQLite的数据库本质上来讲就是一个磁盘上的文件，所以一切的数据库操作其实都会转化为对文件的操作，而频繁的文件操作将会是一个很好时的过程，会极大地影响数据库存取的速度。例如：向数据库中插入100万条数据，在默认的情况下如果仅仅是执行 sqlite3_exec(db, “insert into name values ‘lxkxf’, ‘24’; ”, 0, 0, &zErrMsg...

（C#版本）提升SQlite数据库效率——开启事务，极速插入数据，3秒100万，32秒1000万条数据...

weixin_33836874的博客

06-13

837

SQLite插入数据效率最快的方式就是：开启事务 + insert语句 + 关闭事务(提交) 利用事务的互斥性，如果在批量的插入操作前显式地开启一次事务，在插入操作结束后，提交事务，那么所有的操作将只执行一次事务，大大地提高IO效率开启事务和提交事务时缺省的，如果不显式写出来，将在每次insert语句前开启事务，insert语句后提交，如果执...

SQLite3性能深入分析

限量发行的专栏

08-19

1万+

SQLite3是移动终端最常用的数据库，它非常轻量，编译后只有数百KB。但它麻雀虽小，五脏俱全，它可以支持多线程，支持事务、约束以及几乎所有的SQL常见特性。iOS中很多App经常会使用到SQLite，在使用SQLite的时候经常会遇到其性能问题。本文将深入SQLite内部实现，分析其性能优化途径。一些基本概念在开始分析之前，首先需要了解一下数据库的基本知识。什么是ACID？ ...

SQLite 的性能优化其实挺难的，但是知道三个技巧让你的应用飞起来！

知道者

09-12

701

最近，有个朋友问我：“为什么我的 Rails 项目用 SQLite，总觉得慢得像蜗牛？”这让我想起很多开发者在遇到类似问题时的感受，尤其是初次接触 SQLite 的时候。SQLite 作为轻量级的数据库，在 Rails 项目中非常常见，特别是开发阶段。但问题来了，SQLite 真有我们想象中那么简单吗？它的性能优化又需要注意什么呢？今天咱们就来聊聊，如何在 SQLite 上做出真正的性能提升。

详细了解SQLITE　优缺点　性能测试

热门推荐

木牛的博客

11-23

1万+

http://blog.sina.com.cn/s/blog_8cfbb9920100zetj.html 什么是SQLITE： SQLite是一个开源免费的数据库，一般用于嵌入系统或者小规模的应用软件开发中，你可以像使用Access一样使用它，你可以免费用于任何应用，包括商业应用，另外，它还支持各种平台和开发工具，这点是某些数据库（比如Access、DBISAM）。 SQLite是一种嵌入式数据库，它跟微软的Access差不多，只是一个.db格式的文件。但是与Access不同的是，它不需..

SQLite 3.43.0 发布，又有啥新功能？

Tony.Dong的专栏

08-29

6737

SQLite 开发团队于 2023 年 08 月 24 日发布了 SQLite 3.43.0 版本。本文给大家分析一下该版本的更新。

sqlite批量插入数据性能优化

androidstar_cn的博客

10-16

4373

最近做数据同步时遇到一个问题，在下载数据时需要批量的向sqlite插入数据，虽然数据不算多，但是实际测试中每插入一条数据需要将近50ms的时间，这意味着100条数据就需要花费5s左右的时间，对于用户来说，体验太差了，必须要优化。在google了之后，发现了sqlite的事务处理问题，在sqlite插入数据的时候默认一条语句就是一个事务，有多少条数据就有多少次磁盘操作。明白了这个，解决方案就

sqlite3 批量insert的性能优化

weixin_33735077的博客

10-27

519

1、传统方式导入,一万条数据的导入（46s）$sqlite_db=newPDO('sqlite:sqlitedata.db','gongz','gongz',[]); $start=time(); $n=0; while($n<100000){ $n++; $sql="INSER...

Android SQLite大数据存储优化

木牛的博客

12-13

808

Android SQLite大数据存储优化我们都知道SQLite是一个轻量级的数据库，在批量存储大数据的时候很受性能的限制。而在android开发中如果存储数据的效率过慢的话，就会造成程序运行的卡顿，用户体验会很不好。我们都说数据库存储的时候要通过开启事务来进行存储，这样能提高存储的效率，但我们也得知道的是频繁的开关事务是最消耗性能的，所有我这里优化的原则是-减少事务的开启与关闭。首先，我们来看看我优化前的代码保存公司信息到数据库，从代码里面初步的看没有任何问题，运行也没有出现任何问题，但当项目

sqlite 性能优化

11-25

以下是几种SQLite性能优化的方法： 1.使用事务：将多个操作放在一个事务中，可以减少磁盘I/O操作，从而提高性能。例如，在插入大量数据时，可以使用BEGIN和COMMIT语句将它们包装在一个事务中。 ```cpp sqlite3_exec(db, "BEGIN;", 0, 0, 0); // 执行多个插入操作 sqlite3_exec(db, "COMMIT;", 0, 0, 0); ``` 2.使用预处理语句：预处理语句可以将SQL语句编译成字节码，然后多次执行，避免了每次执行时都需要重新编译的开销。例如，在插入大量数据时，可以使用sqlite3_prepare_v2函数编译SQL语句，然后使用sqlite3_bind_*函数绑定参数，最后使用sqlite3_step函数执行。 ```cpp sqlite3_stmt *stmt; const char *sql = "INSERT INTO t1 VALUES (?, ?, ?)"; sqlite3_prepare_v2(db, sql, strlen(sql), &stmt, 0); for (int i = 0; i < nCount; ++i) { sqlite3_reset(stmt); sqlite3_bind_int(stmt, 1, i); sqlite3_bind_int(stmt, 2, i * 2); sqlite3_bind_int(stmt, 3, i / 2); sqlite3_step(stmt); } sqlite3_finalize(stmt); ``` 3.使用索引：索引可以加速查询操作。在创建表时，可以使用CREATE INDEX语句创建索引。 ```cpp const char *sql = "CREATE INDEX idx_t1_col1 ON t1(col1)"; sqlite3_exec(db, sql, 0, 0, 0); ``` 4.使用内存数据库：内存数据库可以将数据存储在内存中，避免了磁盘I/O操作，从而提高性能。在打开数据库时，可以使用特殊的文件名“:memory:”来创建内存数据库。 ```cpp sqlite3_open(":memory:", &db); ```