0. 场景及问题
目前网关项目在使用Sqlite的数据库存储数据,但是我们使用的方式和一般的数据库使用有区别,导致出现了两个问题:
- Sqlite3占用内存迅速增长,这种增长是cat /proc/fd号/statm 的显示增长,区别于: sqlite3内存增长原因数据库缓存导致的增长。
- 数据删除时间过长,影响了其他业务;
一般使用方式是需要数据库存储或查询数据时,使用sqlite3_open()打开数据库,使用完毕后sqlite3_close()关闭数据库。
我们项目使用的方式是一次使用sqlite3_open()打开后,周期性的往数据库中插入数据和查询数据,在整个程序运行结束时才去关闭数据库。
1. 问题1分析
1.1 原因
- 多次的插入和查询,未完全处理好内存释放;
- sqlite内部机制的问题,需要执行sqlite3_close()才能完全将申请的内存释放掉;
1.2 验证
只使用一次打开,只进行插入操作,保证使用的内存正常释放sqlite3_free(),发现内存还是增长(此处不贴代码,需要代码: 使用 Sqlite3内存增长原因复盘)。使用周期关闭的方式,目前是10分钟关