sqlite 锁机制 &&时间函数

本文介绍了SQLite数据库在并发场景下的锁定处理方法,包括使用互斥量进行读写控制及设置等待时间,同时还详细讲解了SQLite中时间/日期函数的使用技巧。

在SQLite的使用过程中最常发生的数据库异常便是数据库被锁定了(SQLITE_BUSY或者SQLITE_LOCKED)。SQLite对于并发的处理机制是允许同一个进程的多个线程同时读取一个数据库,但是任何时刻只允许一个线程/进程写入数据库。所以必须要必须要对数据库的读写进行控制。 SQLite数据库本身提供了两个函数用来处理锁定情况: int sqlite3_busy_handler(sqlite3*, int(*)(void*,int), void*); int sqlite3_busy_timeout(sqlite3*, int ms); 使用这两个函数可以设定当发生数据库锁定的时候,调用什么函数来处理,以及设定锁定时的等待时间。 当然通常情况下我们还可以用另外一种方法来解决这类问题,那便是设置互斥量。一般情况下我们可以使用互斥量,临界区等来实现。在这里我使用了互斥量,主要是因为我需要在多个不同的进程中并发的访问同一个数据库。用于锁定和解锁的函数如下: void Lock() { if((hCounter = OpenMutex(MUTEX_ALL_ACCESS,FALSE,"kangxiaofang")) == NULL) { //如果没有其他进程创建这个互斥量,则重新创建 hCounter = CreateMutex(NULL,FALSE,"kangxiaofang"); WaitForSingleObject(hCounter,INFINITE); } else { WaitForSingleObject(hCounter,INFINITE); } } void UnLock() { //释放使用权 ReleaseMutex(hCounter); //关闭句柄 CloseHandle(hCounter); } 当然我们也可以把等待时间设定为60秒,以免出现死等的现象。具体使用时可以按如下调用: //锁定数据库 Lock(); rc = sqlite3_exec(db, "BEGIN;", 0, 0, &zErrMsg); rc = sqlite3_exec(db, exec, 0, 0, &zErrMsg); rc = sqlite3_exec(db, "COMMIT;", 0, 0, &zErrMsg); //数据库解锁 UnLock(); 经过测试这种方法的消耗要小于循环打开数据库的操作:)接下来我们要讨论一下,如何在SQLite中存取大容量的数据(二进制)。

 

SQLite包含了如下时间/日期函数:
datetime().......................产生日期和时间
date()...........................产生日期
time()...........................产生时间
strftime().......................对以上三个函数产生的日期和时间进行格式化

datetime()的用法是:datetime(日期/时间,修正符,修正符...)
date()和time()的语法与datetime()相同。

在时间/日期函数里可以使用如下格式的字符串作为参数:
YYYY-MM-DD
YYYY-MM-DD HH:MM
YYYY-MM-DD HH:MM:SS
YYYY-MM-DD HH:MM:SS.SSS
HH:MM
HH:MM:SS
HH:MM:SS.SSS
now
其中now是产生现在的时间。

举例(写这个笔记的时间是2006年10月17日晚8点到10点,测试环境:SQLite 2.8.17,WinXP,北京时间):

例1.
select datetime('now');
结果:2006-10-17 12:55:54

例2.
select datetime('2006-10-17');
结果:2006-10-17 12:00:00

例3.
select datetime('2006-10-17 00:20:00',' 1 hour','-12 minute');
结果:2006-10-17 01:08:00

例4.
select date('2006-10-17',' 1 day',' 1 year');
结果:2007-10-18

例5.
select datetime('now','start of year');
结果:2006-01-01 00:00:00

例6.
select datetime('now','start of month');
结果:2006-10-01 00:00:00

例7.
select datetime('now','start of day');
结果:2006-10-17 00:00:00

例8.
select datetime('now',' 10 hour','start of day',' 10 hour');
结果:2006-10-17 10:00:00

例9.
select datetime('now','localtime');
结果:2006-10-17 21:21:47

例10.
select datetime('now',' 8 hour');
结果:2006-10-17 21:24:45


例3中的 1 hour和-12 minute表示可以在基本时间上(datetime函数的第一个参数)增加或减少一定时间。

例5中的start of year表示一年开始的时间。

从例8可以看出,尽管第2个参数加上了10个小时,但是却被第3个参数“start of day”把时间归零到00:00:00,随后的第4个参数在00:00:00
的基础上把时间增加了10个小时变成了10:00:00。

例9把格林威治时区转换成本地时区。

例10把格林威治时区转换成东八区。

strftime()函数可以把YYYY-MM-DD HH:MM:SS格式的日期字符串转换成其它形式的字符串。
strftime()的语法是strftime(格式, 日期/时间, 修正符, 修正符, ...)

它可以用以下的符号对日期和时间进行格式化:
%d 月份, 01-31
%f 小数形式的秒,SS.SSS
%H 小时, 00-23
%j 算出某一天是该年的第几天,001-366
%m 月份,00-12
%M 分钟, 00-59
%s 从1970年1月1日到现在的秒数
%S 秒, 00-59
%w 星期, 0-6 (0是星期天)
%W 算出某一天属于该年的第几周, 01-53
%Y 年, YYYY
%% 百分号

strftime()的用法举例如下:
例11.
select strftime('%Y.%m.%d %H:%M:%S','now','localtime');
结果:2006.10.17 21:41:09


例11用圆点作为日期的分隔附,并把时间转换为当地的时区的时间。

更多关于SQLite日期时间函数方面的内容,可以参考Chris Newman写的《SQLite》(ISBN:0-672-32685-X)中的《Working with Dates and
Times》一文。
SQLite 中的 "database locked" 错误通常发生在多个进程或线程尝试同时写入数据库时。SQLite 使用文件级定来确保事务的原子性和一致性,但这也可能导致并发写入操作被阻塞并引发 `database locked` 错误。 以下是一些常见的原因及解决方法: ### 1. **检查是否有长时间运行的事务** - 如果某个连接正在执行一个长时间运行的写操作(如大量插入、更新或删除),它会持有数据库,阻止其他写操作。 - 解决方法是尽量减少事务的持续时间,尽早提交或回滚事务。 ### 2. **使用 WAL 模式(Write-Ahead Logging)** - SQLite 提供了 WAL 模式,可以显著提高并发性能,允许多个读取者和一个写入者同时访问数据库。 - 启用 WAL 模式的 SQL 命令如下: ```sql PRAGMA journal_mode=WAL; ``` - 这种模式下,写操作不会直接修改主数据库文件,而是写入一个独立的日志文件(WAL 文件),从而减少了争用[^1]。 ### 3. **增加忙等待超时时间(Busy Timeout)** - 默认情况下,SQLite 在遇到冲突时会立即返回错误。可以通过设置 `sqlite3_busy_timeout` 来让 SQLite 自动重试一段时间。 - 示例代码(C API): ```c sqlite3_busy_timeout(db, 5000); // 设置为5秒 ``` - 这样可以让数据库在短时间内自动重试,而不是立刻抛出 `database locked` 错误。 ### 4. **避免跨线程共享数据库连接** - SQLite 不支持多线程写入同一个数据库连接。如果多个线程共享同一个数据库连接并尝试写入,会导致竞争。 - 正确的做法是每个线程使用自己的数据库连接,或者使用串行化队列来保证同一时间只有一个线程访问数据库。 ### 5. **优化 SQL 查询与索引** - 缓慢的查询可能会长时间占用数据库资源,导致其他操作被阻塞。 - 确保常用查询字段有适当的索引,以加快查询速度并减少时间。 ### 6. **检查是否有未关闭的数据库连接** - 如果某些连接没有正确关闭,它们可能会继续持有。 - 确保每次打开数据库连接后都能正确调用 `sqlite3_close()` 或等效函数关闭连接。 ### 7. **使用 `BEGIN IMMEDIATE` 或 `BEGIN EXCLUSIVE` 控制级别** - 如果你希望提前获取更高的级别以避免后续冲突,可以显式地开始事务并指定类型: ```sql BEGIN IMMEDIATE; -- 执行写操作 COMMIT; ``` - 这样可以在事务开始时就获得排他,防止其他写操作进入。 ### 8. **升级到最新版本的 SQLite** - 新版本的 SQLite 可能包含对并发性能的改进和锁机制的优化。 - 确保使用的 SQLite 版本是最新的稳定版本。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值