关于SQLite索引对写入性能影响的测试

最新推荐文章于 2025-05-19 15:39:53 发布
最新推荐文章于 2025-05-19 15:39:53 发布
阅读量2.9k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/shellching/article/details/50578106
本文通过实验对比了在SQLite中先建索引与后建索引的效率差异。测试结果显示，在数据写入完成后建立索引的方式比边写入边建立索引的方式效率更高，总耗时更短。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >



测试目的：对比先建索引与后建索引的效率

数据字段20个，类型包括int、float、text

条数3376892

索引数1，字段类型int

数据库文件总大小760M


数据条数

耗时s

速度r/s

0~50w

90

5500

50w~100w

304

1600

100w~150w

460

1080

 

 

 

 

 

 













先建索引的情况：

写到150w时耗时已经>14分钟，假设后面的性能与100w~150w时的性能持平，

后面还有大约200w数据460*4=1840s=30分钟，总耗时>44分钟

后建索引的情况：

无索引写入3376892条，耗时139s，写入速度24294r/s

然后执行创建索引耗时406s

总耗时545s 约9分钟

结论：在优化SQLite写入性能时，不仅考虑如何设计索引，还要考虑索引的创建时机

深入理解SQLite：存储引擎、索引、事务与锁
陆业聪
03-30 2144
本文探讨了SQLite数据库的核心特性，包括存储引擎、索引结构、事务隔离级别、MVCC实现和锁定级别，以帮助理解SQLite的性能和并发处理能力，从而更好地利用SQLite进行应用开发。
SQLite优化实践：数据库设计、索引、查询和分库分表策略
陆业聪
03-16 4494
本文详细介绍了SQLite数据库优化的实践方法，包括数据库设计优化、索引优化、查询优化和分库分表策略。通过合理选择数据类型、使用NOT NULL约束和默认值、创建合适的索引、优化查询条件、使用预编译语句和事务，以及实施分库分表策略，可以有效提高SQLite数据库在实际应用中的性能和数据处理能力。
sqlite高性能插入数据
08-27
sqlite高性能插入数据
sqlite数据插入效率
2301_80315592的博客
08-30 2558
时间相关接口：功能：得到从1970年1月1日0时0分0秒到现在的秒数。<可以利用该函数来计算一个程序的运行时间，只需就可以。注意单位的转变。精度到微秒结构体： struct timeval {/* seconds */ 秒/* microseconds */ 微妙 1s=1000000us结构体： struct timezone {/* minutes west of Greenwich */ 格林威治向西的分钟数。
一篇文章带你掌握SQLite3基本用法
最新发布
leo__520的博客
05-19 495
SQLite3是一种轻量级的嵌入式数据库，广泛应用于移动设备、嵌入式系统和小型应用中。它不需要独立的服务器进程，数据存储在一个单一的磁盘文件中，极大地方便了应用的部署和管理。本文将带你全面掌握SQLite3的基本用法，包括数据库的创建、表的操作、数据的增删改查以及索引和事务的使用。SQLite3是一个C语言库，提供了一个独立、无服务器、零配置、事务性的SQL数据库引擎。在应用程序中使用SQLite3时，参数化查询可以防止SQL注入攻击。SQLite3数据库是一个文件，创建数据库实际上是创建一个文件。
Sqlite3写性能优化-每秒百万条写入
Ango_的专栏
12-21 2万+
sqlite3写入速度很慢？那一定是没有找到合适的方法，本文测试了几种方法并提供了测试源代码
Sqlite大数据写入性能优化
木牛的博客
12-14 1535
众所周知，Sqlite是一个轻量级的数据库，仅仅需要一个exe文件就能运行起来。在处理本地数据上，我比较喜欢选择使用它，不仅是因为他与sql server有着比较相近的语法，还因为它不需要安装，仅需要通过命令行就能启动了，而且他在处理大数据时，性能比sql server好很多，好吧这里不继续争论性能优劣。 　　首先，这次的问题是在一次项目中遇到的，项目要求能大量导入数据，而且由于项目性质（轻便，本地化），所以我选择sqlite来存放数据。 　　第一版代码： 1 StringBuilder sql
SQLite 性能优化实例分享
12-16
应主要在真机上进行性能测试，以反映真实使用情况。 5. **数据库设计**：在设计数据库时应考虑到未来可能的扩展需求，优化读写性能，例如合理规划索引、表结构和数据类型。 6. **版本管理和升级**：随着应用的发展...
Python实现读写sqlite3数据库并将统计数据写入Excel的方法示例
09-09
这里，`index=False`参数用于不将行索引写入Excel文件。如果需要，你还可以设置其他参数，如列标题、样式等。 对于更复杂的数据处理，可以使用SQL查询从数据库中提取数据，然后用`pandas.read_sql_query()`或`...
SQLite3百万条数据写入性能优化实战
资源摘要信息:"sqlite3性能优化源代码 数据插入 开启事务 执行准备 性能提升 每秒百万条数据写入" SQLite是一个非常流行的嵌入式关系型数据库，以其轻量级和高效率著称。在数据写入操作中，尤其是在需要高速写入...
如何在SQLITE中使用时间字段作索引
09-11
详细讲述了在SQLITE中使用时间字段作索引进行SQL插入及查询操作的方法
SQLite百万级数据量高性能读写
好看资源网的博客
09-27 3102
在处理百万级数据量时，SQLite不仅需要高效的读写性能，还需要灵活的查询能力。本文将深入探讨设计模式、SQL优化、复杂查询和C++代码示例，帮助开发者在使用SQLite时实现高性能。
sqlite3数据库最大可以是多大？可以存放多少数据？读写性能怎么样？
热门推荐
weixin_34290631的博客
05-20 2万+
sqlite是款不错的数据库，使用方便，不需要事先安装软件，事先建表。很多人担心它的性能和数据存储量问题。比如有的网友问：Sqlite数据库最大可以多大呀？会不会像acc数据库那样，几十MB就暴掉了？不会的，放心用SQLite, 这是两个数量级的东西, 看下面的说明。Access不能算真正意义上的数据库，但是Access是前台和后台在一起，对小用户还是有其优点。SQLite，是一款轻型的数据库，是...
SQLite3性能优化
tietao的专栏
10-20 2万+
SQLite3性能调整主要通过pragma指令来实现。 比如调整：空间释放、磁盘同步、Cache大小等。 一.空间释放 1.如何查询： PRAGMA auto_vacuum; 含义：查询数据库的auto-vacuum标记。 2.标记含义： auto-vacuum标记的含义： 正常情况下，当提交一个从数据库中删除数据的事务时，数据库文件不改变大小。未使用的文件页被标记并在以后的添加操
nodejs mysql性能测试_基于NodeJS的sqlite3插入性能测试
weixin_42400518的博客
02-02 447
我的机器上有两块存储一块是固态硬盘一块是机械硬盘，为了更好的反映实际的使用环境，程序运行选择的是使用机械硬盘。操作系统是装在固态硬盘上面。测试环境及运行版本：NodeJS的运行版本:v4.6.0$ node -vv4.6.0Asynchronous, non-blocking SQLite3 bindings安装npm install node-pre-gyp nancnpm install sq...
sqlite3性能优化要点
weixin_30641999的博客
06-10 230
Put inserts/updates in a transaction将插入语句和更新放到一个transaction里 Playing with page sizes makes a difference as well (PRAGMA page_size). Having larger page sizes can make reads and writes go a bit faste...
SQLite3调测优化
chenliang0224的专栏
07-16 974
非常好的一篇博客，详见：https://blog.youkuaiyun.com/lijinqi1987/article/details/51852721 首先，建立数据库 rc = sqlite3_exec(db, "create table if not exists testinfo (id integer primary key, age integer, height text, weight ...
sqlite3数据库最大可以是多大？可以存放多少数据？读写性能怎么样？详述
u011555996的博客
02-23 8659
sqlite是款不错的数据库，使用方便，不需要事先安装软件，事先建表。很多人担心它的性能和数据存储量问题。 比如有的网友问：Sqlite数据库最大可以多大呀？会不会像acc数据库那样，几十MB就暴掉了？ 不会的，放心用SQLite, 这是两个数量级的东西, 看下面的说明。 Access不能算真正意义上的数据库，但是Access是前台和后台在一起，对小用户还是有其优点。 SQLite，是一款轻型的数据库，是遵守ACID的关系型数据库管理系统，它的设计目标是嵌入式的，而且目前已经在很多嵌入式产品中使用了它，它占
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值