Cursor多线程操作下的异常

最新推荐文章于 2025-06-01 11:48:22 发布
最新推荐文章于 2025-06-01 11:48:22 发布 · 1.1k 阅读 · 0
文章标签：

#java #移动开发 #数据库

本文探讨了一种在多线程环境下使用SQLiteCursor时出现的NullPointer异常问题，并通过分析源码找到了问题根源，最后提出了加同步锁的解决方案。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

       近来发现一个关于SQLiteCursor的问题，多线程操作下产生的异常，偶现。

 

       在Application中操作了Cursor的close()后紧接着又从DBHelper中取了新的引用。然后发广播，到Activity的Receiver中接受后，调用了app.getCursor();取得Application中的Cursor引用，调用了cursor.getCount();

 

结果出现了一个NullPointer错误：

 

E/AndroidRuntime(28116): java.lang.NullPointerException
E/AndroidRuntime(28116): 	at android.database.sqlite.SQLiteCursor.fillWindow(SQLiteCursor.java:144)
E/AndroidRuntime(28116): 	at android.database.sqlite.SQLiteCursor.getCount(SQLiteCursor.java:133)
E/AndroidRuntime(28116): 	at com.letv.signalsourcemanager.MainActivity.handleScanCompleted(MainActivity.java:1728)
E/AndroidRuntime(28116): 	at com.letv.signalsourcemanager.MainActivity.access$1200(MainActivity.java:88)
E/AndroidRuntime(28116): 	at com.letv.signalsourcemanager.MainActivity$10.onReceive(MainActivity.java:2570)
E/AndroidRuntime(28116): 	at android.support.v4.content.LocalBroadcastManager.executePendingBroadcasts(LocalBroadcastManager.java:297)
E/AndroidRuntime(28116): 	at android.support.v4.content.LocalBroadcastManager.access$000(LocalBroadcastManager.java:46)
E/AndroidRuntime(28116): 	at android.support.v4.content.LocalBroadcastManager$1.handleMessage(LocalBroadcastManager.java:116)
E/AndroidRuntime(28116): 	at android.os.Handler.dispatchMessage(Handler.java:99)
E/AndroidRuntime(28116): 	at android.os.Looper.loop(Looper.java:137)
E/AndroidRuntime(28116): 	at android.app.ActivityThread.main(ActivityThread.java:4777)
E/AndroidRuntime(28116): 	at java.lang.reflect.Method.invokeNative(Native Method)
E/AndroidRuntime(28116): 	at java.lang.reflect.Method.invoke(Method.java:511)
E/AndroidRuntime(28116): 	at com.android.internal.os.ZygoteInit$MethodAndArgsCaller.run(ZygoteInit.java:789)
E/AndroidRuntime(28116): 	at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:556)
E/AndroidRuntime(28116): 	at dalvik.system.NativeStart.main(Native Method)
W/ActivityManager(  635):   Force finishing activity com.letv.signalsourcemanager/.MainActivity

 

   查看SQLiteCursor源码发现，

 

    @Override
    public int getCount() {
        if (mCount == NO_COUNT) {
            fillWindow(0);
        }
        return mCount;
    }

    private void fillWindow(int requiredPos) {
        clearOrCreateWindow(getDatabase().getPath());

        if (mCount == NO_COUNT) {
            int startPos = DatabaseUtils.cursorPickFillWindowStartPosition(requiredPos, 0);
            mCount = mQuery.fillWindow(mWindow, startPos, requiredPos, true);
            mCursorWindowCapacity = mWindow.getNumRows();
            if (Log.isLoggable(TAG, Log.DEBUG)) {
                Log.d(TAG, "received count(*) from native_fill_window: " + mCount);
            }
        } else {
            int startPos = DatabaseUtils.cursorPickFillWindowStartPosition(requiredPos,
                    mCursorWindowCapacity);
            mQuery.fillWindow(mWindow, startPos, requiredPos, false);
        }
    }

 

   

具体是getCount的时候现判断

mCount == NO_COUNT

实际上此时cursor的count是大于0的，然后进入了fillWindow，然后在

mCursorWindowCapacity = mWindow.getNumRows();

出现了空指针错误。

 

    由于现象是偶现的，所以我就判定跟多线程有关，导致Cursor的问题。

 

   那么就需要加同步锁来解决了。具体方式有很多，此处不赘述。

 

 

Cursor空指针问题及解决方法
EadDeveloper的博客
09-19 393
然而，当我们在编程过程中使用Cursor对象时，有时会遇到Cursor空指针问题。在编程中，Cursor空指针问题是一个常见的错误，特别是在处理数据库操作时。然而，如果在创建Cursor对象之前，我们没有正确地创建数据库连接对象，或者在执行查询操作之前没有初始化Cursor对象，就会导致Cursor空指针问题。确保正确地创建数据库连接对象：在使用Cursor对象之前，确保正确地创建了数据库连接对象，并且连接成功。在上面的修改后的代码中，我们添加了对连接对象和Cursor对象的空指针检查。
[Python][多线程][Demo]python多线程操作mysql数据库（读，写）
friend_c的博客
04-22 2983
需求 多个线程同时读数据库的一张表，使用数据库连接池。显然数据库连接池的数量就是读线程的数量。 根据读的结果（需求1）创建若干张数据表，每个时刻只有一个线程在创建表（经测试发现多线程同时创建表会有表创建不出来，为了保险，让同一时刻只有一个线程创建表）。对于同一张表，同一时刻只有一个线程在写；对于不同的表，可以多个线程并发写。 注意 一定要关闭连接后再释放锁，如果顺序错误则会耗尽数据库连接池的数量。本人新手，好半天才发现问题的原因。 实现 数据库连接池用了mysql官方驱动自带的连接池，功能很简单，获取
Content Provider之间互相通信的源码浅析
Sdtin的博客
07-27 1389
写在前面：本文是根据大神的博客http://blog.youkuaiyun.com/luoshengyang/article/details/6967204，对android5.0系统进行了分析 一、个人理解 分析之前先说一下，自己对Content Provider进程间通信的基本理解。个人认为，Android中进程间通信的套路都是基本一致。基本和AIDL差不多。其实AIDL本身就是用来在进程之间通信的。
Android SQLite的 select 操作分析
E飞
02-10 1万+
就像 《Android SQLiteStatement 编译、执行 分析》 中所说的，SQLite中所有SQL语句都需要先编译为stmt，然后执行。 上述文章介绍了SQLiteStatement在android层面的编译执行。然而，类SQLiteStatement只能用以执行无返回值或者只有一行一列（1X1）的sql语句，例如INSERT ALERT 等，而像SELECT这种返回结果可能多行多列的则不适用。 android对select提供了专门的执行方法rawQuery()，对其也有特殊的SQLiteQu
AI赋能多线程安全：Cursor解锁线程同步单元测试新姿势
远程部署调试 运行安装 项目调试 二次开发 项目技术新 持续迭代 部分源码免费分享
06-01 957
《Cursor助力多线程安全：AI编程新纪元》 摘要：本文探讨了AI时代多线程编程的安全挑战与Cursor工具的创新应用。多线程安全问题如竞态条件、死锁等严重影响AI应用的稳定性，而Cursor作为智能编程助手，通过自然语言代码生成、智能补全和自动化测试等功能，显著提升了多线程开发效率。文章详细解析了线程同步原理（锁机制、信号量等）及单元测试的重要性，并展示了Cursor生成测试用例的实战流程。通过智能安防系统的真实案例，验证了Cursor在多线程安全测试中的实效。未来，AI将在测试生成、调试工具等方面持续
android sqlite 源码分析,Android数据库源码分析(2)-SQLiteDatabase的实现以及多线程行为...
weixin_42415451的博客
05-25 562
本篇主要关注SQLiteDatabase的线程同步实现与架构实现。1 SQLiteClosable的acquireReference与releaseReference方法SQLiteClosable是SQLiteDatabase的父类，也同时是数据库下其他几个类的父类。其中实现了引用计数逻辑来控制资源释放的时机。private int mReferenceCount = 1;public void...
SQLite数据库的cursor在Android系统Java层及JNI层的实现机制
azurelaker的博客
10-25 3424
SQLite
Android SQLite3多线程操作问题研究总结
01-20
以下是对Android SQLite3多线程操作问题的深入研究和总结： 1. **getWriteableDatabase()与getReadableDatabase()的区别** - `getWriteableDatabase()` 是读写操作的入口，它会尝试打开一个可读写的数据库连接。...
poi多线程操作问题（OOM与操作createCell报错ConcurrentModificationException）
Hpsyche的博客
08-04 1776
前言 在公司项目“北森开放平台”API的对接上，需要将8w多条数据导出到Excel中， 原先单线程访问5000条数据需要20多分钟； 后面利用线程池开启多线程访问API接口来获取信息，6分钟搞定，大概效率提高了5倍，但是！！！ 同时导出8w多数据，发现在导出5w多的时候OOM了，原因：数据量太大，造成sheet对象过大，堆空间直接OOM； 解决方案： 减少不必要的字段 多文件打包（每5000...
python多线程处理excel
DENING95的博客
07-01 732
使用python的多线程方法处理excel
Android中SQLite的Cursor是不会为空的!!!!!!!!!!!!!!!!
gzhjavagzh的专栏
08-19 1938
这个错误大家一定要注意!!!!!!!!!!!!!!!
伪共享
weixin_30795127的博客
03-15 558
伪共享(False Sharing) 原文地址：http://ifeve.com/false-sharing/ 作者：Martin Thompson 译者：丁一 缓存系统中是以缓存行（cache line）为单位存储的。缓存行是2的整数幂个连续字节，一般为32-256个字节。最常见的缓存行大小是64个字节。当多线程修改互相独立的变量时，如果这些变量共享同一个缓存行，就会无意中影响彼此的...
【流媒体】SRS之信号的管理：SrsSignalManager
C/C++Linux、音视频、DPDK
05-29 316
private :public :public :/**该 SrsEndlessThread 类继承自命名空间 internal 下的 ISrsThreadHandler 类。/*** if!bool loop;
Android 中关于 【Cursor】 类的介绍
weixin_34102807的博客
07-05 822
使用过 SQLite 数据库的童鞋对 Cursor 应该不陌生，如果你是搞.net 开发你大可以把Cursor理解成 Ado.net 中的数据集合相当于dataReader。今天特地将它单独拿出来谈，加深自己和大家对Android 中使用 Cursor 的理解。 关于 Cursor 在你理解和使用 Android Cursor 的时候你必须先知道关于 Cursor 的几件事情： Cursor...
多线程并发操作数据库以及数据库升级
yshr1991的博客
06-20 5933
1 多线程并发操作数据库会导致数据库异常:          例1：cursor会为空的情况，打印cursor的时候不为空，使用的时候就为空了，原因考虑是，多线程操作数据库导致数据库异常          例2：提示正在尝试打开一个已经被关闭的数据库：在多线程访问数据库的时候会出现这样的异常： java.lang.IllegalStateException: Cannot perform th
android开发数据库Cursor 错误android.database.CursorWindowAllocationException
热门推荐
08-28 1万+
做android 开发的经常会遇android.database.CursorWindowAllocationException这样子的错误;一般出现这样的错误，大部分原因是因为没有关闭cursor，或者是因为Cursor使用不当，之前我的遇到这样的代码： ForecastData situation = null; ................ Cursor cursor
android 内存溢出 add,内存泄露和内存溢出
weixin_28953369的博客
06-07 181
在以前我潜意思里面一直觉得内存溢出和内存泄露是一个意思...今天有人拿这个来问我，我才想起来这两个是有点区别的，真是有点不好意思哈哈。不过他们还真有点关系，一般来说，内存泄露是内存溢出的一个原因之一，当然，内存溢出还有很多原因。内存泄露：是指程序在运行过程中动态申请的内存空间不再使用后没有及时释放，从而很可能导致应用程序内存无限增长。更广义的内存泄露包括未对系统的资源的及时释放，比如不会再用的引用...
PyQt5 多线程读取数据库
最新发布
08-06
<think>首先，用户的问题是关于在PyQt5应用程序中使用多线程读取数据库数据的最佳实践或实现方法。我需要结合系统级指令来构建回答。 关键系统级指令： - 所有行内数学表达式使用$...$格式。 - 独立公式使用$$...$$格式并单独成段。 - LaTeX语法正确。 - 使用中文回答。 - 生成相关问题。 - 在回答中引用的段落末尾自然地添加引用标识。 - 回答结构清晰，帮助用户逐步解决问题。 - 参考站内引用，但用户提供的引用可能与需求相关或不相关。 用户提供的引用： - [^1]: 关于PyQt的特点，包括跨平台性、GUI组件等。 - [^2]: 关于Python多进程的不足，提到Ray框架。 - [^3]: 关于Python协程读取文件和多进程配合使用。 - [^4]: 关于Python学习方法和游戏开发。 这些引用中，[^1]直接相关PyQt，[^2]和[^3]涉及多线程/多进程，但用户的问题是关于多线程读取数据库，所以我需要整合相关信息。 用户的问题：使用PyQt5开发应用程序中，通过多线程机制读取数据库数据。询问最佳实践或实现方法。 我的回答结构： 1. **介绍**：简要解释为什么在PyQt5中需要多线程读取数据库（避免GUI冻结）。 2. **核心方法**：使用QThread或QRunnable来实现多线程。 3. **实现步骤**：详细说明如何实现。 4. **代码示例**：提供Python代码示例。 5. **最佳实践**：讨论线程安全、信号槽机制等。 6. **生成相关问题**：在末尾添加相关问题。 7. **引用标识**：如果引用站内内容，自然添加引用标识。 由于用户提供的引用不是直接相关的，我需要基于一般知识构建回答。如果有相关点，可以引用。例如： - 引用[^1]提到PyQt的事件驱动编程，这支持信号槽机制。 - 引用[^3]提到多进程和协程配合使用，但用户问的是多线程，不是多进程。 在回答中，我会自然地引用相关部分。 **数学表达式**：用户的问题不涉及数学，但指令说所有行内数学表达式必须使用$...$。如果回答中不涉及数学，我可以不添加。但为了安全，如果有任何数学概念，我会用。例如，如果讨论时间复杂度，可以提到$O(n)$。 在数据库读取上下文中，可能没有数学表达式，所以可能不需要添加。 **生成相关问题**：在末尾，添加§§相关问题§§部分。 完整回答框架： - 开头：直接回答问题。 - 主体：分步骤解释。 - 结尾：总结。 - 然后：相关问题。 具体内容： 1. **为什么需要多线程**：在GUI应用程序中，数据库读取可能耗时，导致界面冻结。PyQt的GUI线程是单线程的，所以需要后台线程。 2. **PyQt5的多线程机制**：使用QThread类或QRunnable。QThread更常用。 3. **实现方法**： - 创建自定义线程类继承QThread。 - 重写run方法进行数据库操作。 - 使用信号槽机制更新GUI。 4. **代码示例**：提供简单示例。 5. **最佳实践**： - 使用QThreadPool管理线程。 - 避免直接访问GUI元素从线程中；使用信号。 - 处理线程安全。 - 错误处理。 6. **引用相关部分**：例如，引用[^1]中提到的信号槽机制。 代码示例使用Python和PyQt5。 相关问题： 1. 如何在PyQt5中处理线程间的通信？ 2. PyQt5多线程读取数据库时如何避免内存泄漏？ 3. 有没有替代QThread的方法来实现多线程？ 确保回答真实可靠。</think>### PyQt5 多线程读取数据库的最佳实践与实现方法 在 PyQt5 应用程序中，数据库读取操作通常是耗时的（例如，涉及复杂查询或大数据量），如果直接在 GUI 主线程中执行，会导致界面冻结或响应延迟。PyQt5 的事件驱动模型要求 GUI 线程保持响应性[^1]，因此使用多线程机制将数据库操作移至后台线程是标准做法。最佳实践基于 PyQt5 的 `QThread` 类和信号槽机制，确保线程安全和高效性。下面我将逐步解释实现方法、提供代码示例，并讨论关键注意事项。 #### 1. **为什么需要多线程？** - PyQt5 的 GUI 线程（主线程）处理用户事件和界面更新。如果数据库操作在主线程中运行，会导致界面卡顿，因为操作如 SQL 查询可能花费数秒甚至更久。 - 多线程允许数据库读取在后台运行，通过信号槽机制将结果安全地传回 GUI 线程更新界面。这符合 PyQt5 的事件驱动编程模型[^1]，避免阻塞事件循环。 - 数据库操作通常涉及 I/O 等待（例如网络延迟或磁盘读写），多线程能充分利用 CPU 资源，提升应用程序整体性能。 #### 2. **核心实现方法** PyQt5 提供了 `QThread` 类来实现多线程。最佳实践包括： - **使用自定义线程类**：继承 `QThread`，重写 `run()` 方法定义数据库操作。 - **信号槽机制**：线程通过信号（Signal）发送数据或状态到 GUI 线程的槽（Slot），确保线程安全（避免直接访问 GUI 元素）。 - **线程管理**：使用 `QThreadPool` 或手动管理线程生命周期，防止资源泄漏。 - **数据库连接处理**：每个线程使用独立的数据库连接，避免共享连接导致的竞争条件。 关键点： - **线程安全**：PyQt5 的信号槽是线程安全的，因为信号发射时，槽函数会在接收线程的上下文中执行（通常是 GUI 线程）。 - **性能优化**：对于频繁读取，使用线程池（`QThreadPool` 和 `QRunnable`）复用线程，减少创建销毁开销[^2]。 - **错误处理**：在 `run()` 方法中捕获异常，并通过信号通知 GUI 线程。 #### 3. **实现步骤与代码示例** 以下是一个完整的实现示例，使用 SQLite 数据库（但方法适用于 MySQL、PostgreSQL 等）。代码包括： - 自定义线程类 `DBReaderThread` 处理数据库读取。 - 主窗口类使用信号槽更新界面。 - 错误处理和线程清理。 ```python import sys from PyQt5.QtCore import QThread, pyqtSignal, QObject from PyQt5.QtWidgets import QApplication, QMainWindow, QPushButton, QListWidget, QVBoxLayout, QWidget import sqlite3 # 示例使用 SQLite，可替换为其他数据库驱动 # 自定义数据库读取线程 class DBReaderThread(QThread): # 定义信号：用于发送读取结果、错误消息和完成状态 data_ready = pyqtSignal(list) # 发送查询结果（列表形式） error_occurred = pyqtSignal(str) # 发送错误消息 finished_signal = pyqtSignal() # 发送完成信号 def __init__(self, db_path, query): super().__init__() self.db_path = db_path self.query = query self.running = True # 控制线程运行状态 def run(self): """重写 run 方法，执行数据库读取操作""" try: # 创建独立数据库连接（每个线程使用自己的连接） conn = sqlite3.connect(self.db_path) cursor = conn.cursor() cursor.execute(self.query) results = cursor.fetchall() # 获取所有查询结果 conn.close() # 通过信号发送结果到 GUI 线程 self.data_ready.emit(results) except Exception as e: self.error_occurred.emit(f"数据库错误: {str(e)}") finally: self.finished_signal.emit() # 发送完成信号 def stop(self): """安全停止线程""" self.running = False self.quit() # 退出线程事件循环 # 主窗口类 class MainWindow(QMainWindow): def __init__(self): super().__init__() self.init_ui() self.thread = None # 存储线程实例 def init_ui(self): """初始化界面""" self.setWindowTitle("PyQt5 多线程数据库读取示例") self.setGeometry(100, 100, 400, 300) # 创建控件 self.button = QPushButton("开始读取数据库", self) self.list_widget = QListWidget(self) # 布局 layout = QVBoxLayout() layout.addWidget(self.button) layout.addWidget(self.list_widget) container = QWidget() container.setLayout(layout) self.setCentralWidget(container) # 连接按钮点击事件 self.button.clicked.connect(self.start_db_reading) def start_db_reading(self): """启动数据库读取线程""" if self.thread and self.thread.isRunning(): return # 避免重复启动 # 创建并启动线程 db_path = "example.db" # 替换为您的数据库路径 query = "SELECT * FROM users" # 示例查询 self.thread = DBReaderThread(db_path, query) # 连接线程信号到槽函数 self.thread.data_ready.connect(self.update_list) self.thread.error_occurred.connect(self.show_error) self.thread.finished_signal.connect(self.on_thread_finished) self.thread.start() # 启动线程 self.button.setEnabled(False) # 禁用按钮防止重复点击 def update_list(self, data): """更新界面：将查询结果显示在列表控件""" self.list_widget.clear() for row in data: self.list_widget.addItem(str(row)) # 显示每行数据 self.button.setEnabled(True) # 重新启用按钮 def show_error(self, message): """显示错误消息""" self.list_widget.clear() self.list_widget.addItem(message) self.button.setEnabled(True) def on_thread_finished(self): """线程完成后的清理""" if self.thread: self.thread.deleteLater() # 安全删除线程对象 self.thread = None def closeEvent(self, event): """窗口关闭时停止线程""" if self.thread and self.thread.isRunning(): self.thread.stop() self.thread.wait() # 等待线程结束 event.accept() # 运行应用程序 if __name__ == "__main__": app = QApplication(sys.argv) window = MainWindow() window.show() sys.exit(app.exec_()) ``` #### 4. **最佳实践与注意事项** - **线程安全**： - 永远不要在子线程中直接操作 GUI 控件（如修改 `QListWidget`），必须通过信号槽传递数据。这避免了竞争条件，因为信号槽会自动同步到 GUI 线程[^1]。 - 数据库连接应每个线程独立创建和关闭，防止共享连接导致的死锁。 - **性能优化**： - 使用 `QThreadPool` 管理多个线程（例如，处理并发读取）。示例中未使用，但您可以将 `DBReaderThread` 改为继承 `QRunnable`，并提交到线程池[^2]。 - 对于大数据量读取，分批获取结果（如 `cursor.fetchmany(100)`），并通过信号分批发送，避免内存溢出。 - **错误处理与资源管理**： - 在 `run()` 方法中使用 `try-except` 捕获异常，并通过信号通知 GUI。 - 在窗口关闭时调用 `thread.stop()` 和 `thread.wait()`，确保线程安全退出，防止僵尸线程。 - 使用 `deleteLater()` 清理线程对象，避免内存泄漏。 - **数据库特定优化**： - 使用连接池（如 `SQLAlchemy` 或数据库驱动的池功能）减少连接开销。 - 异步 I/O 库（如 `aiosqlite`）可与 PyQt5 信号槽结合，但需注意线程模型兼容性。 - **替代方案**： - **协程与异步**：Python 的 `asyncio` 可以配合 PyQt5，但需使用 `QAsyncio` 或类似库集成事件循环[^3]。通常，`QThread` 更简单直接。 - **多进程**：如果数据库操作 CPU 密集（如复杂计算），使用多进程（`multiprocessing` 模块），但进程间通信开销大，多线程更适合 I/O 密集型读取[^2]。 #### 5. **总结** 在 PyQt5 中实现多线程读取数据库的核心是：自定义 `QThread` 类处理后台操作，并通过信号槽安全更新 GUI。这种方法确保了应用程序的响应性和可靠性。实践中，始终优先使用 PyQt5 的内置线程机制，而不是 Python 的标准 `threading` 模块，因为后者可能不兼容 PyQt 的事件循环[^1]。如果您的数据库操作涉及高并发，考虑使用 `QThreadPool` 扩展线程管理。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值