PostgreSQL学习笔记----进程结构

最新推荐文章于 2025-03-24 11:01:49 发布
最新推荐文章于 2025-03-24 11:01:49 发布
阅读量681 收藏 8
点赞数 23
分类专栏： PostgreSQL 文章标签： postgresql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_39182381/article/details/140682653
版权

进程概述

        PostgreSQL 系统的主要功能都集中于 Postgres 程序，其入口是 Main 模块中的 main 函数，在初始化数据集簇、启动数据库服务时，都将从这里开始执行。

        

        PostgreSQL 使用一种专用服务器进程体系结构，其中最主要的两个进程就是守护进程 Postmaster 和服务进程 Postgres 。从本质上来说，Postmaster 和 Postgres 都是通过载入 Postgres 程序而形成的进程，只是在运行时所处的分支不同而已。守护进程 Postmaster 负责整个系统的启动和关闭。它监听并接受客户端的连接请求，为其分配服务进程 Posgres 。服务进程 Postgres 接受并执行客户端发送的命令。它在底层模块(如存储、事务管理、索引等)之上调用各个主要的功能模块(如编译器、优化器、执行器等)，完成客户端的各种数据库操作，并返回执行结果。

        PostgreSQL 守护进程 Postmaster 除为用户连接请求分配后台Postgres 服务进程外，还将启动相关的后台辅助进程:

    最低0.47元/天 解锁文章
    postgresql中的主要进程
    Zhangjay的专栏
    06-08 3520
    一、Postgres在启动后，可分别以一下四种形式启动进程：* SubPostmasterMain* AuxiliaryProcessMain* PostgresMain* PostmasterMainPostmasterMain1. 设置进程ID2. 初始化内存池3. 设置路径、时间等变量4. 初始化GUC选项，处理输入参数并载入hba和ident5. 设置共享内存和信号量，初始化共享数据结构6
    PostgreSQL学习笔记----GUC机制
    你好！我是一名互联网搬砖的菜鸟，我的博客主要记录我在工作和学习过程中积累的项目经验和技术总结。 我希望通过这些文章，能够帮助更多的开发者解决实际问题，提高开发效率。 欢迎大家订阅我的博客，期待与你们的互动和交流！
    07-25 1451
    在守护进程 Postmaster 初始化内存环境之后，需要配置 Postmaster 运行时所需的各种参数。模块实现了多种数据类型（目前有 boolean、int、real、string、enum 五种）的变量配置。这些参数可能会由不同的进程在不同的时机进行配置，系统会根据既定的优先权来确定什么情况下的配置可以生效。
    PostgreSQL进程结构
    雪辉博客
    12-20 2783
    文章目录一、PostgreSQL进程分类二、进程介绍2.1 主进程postmaster2.2 Logger系统日志进程2.3 BgWriter后台写进程2.4 WalWriter预写日志进程2.5 PgArch归档进程2.6 AutoVacuum自动清理进程2.7 PgStat统计数据收集进程2.8 CheckPoint（检查点）进程 一、PostgreSQL进程分类 主进程Postmaster 辅助子进程Logger(系统日志)进程 辅助子进程BgWriter(后台写)进程 辅助子进程WalWrite
    PostgreSQL结构
    qiao2458的博客
    03-24 1038
    PostgreSQL 作为一个单机的关系型数据库，与单机Oracle的架构是比较相似的，与MySQL的InnoDB引擎也比较像。据我目前的了解，单机数据库的整体架构都差不太多，都是包含一个主的进程，一些辅助进程，以及一个大的共享内存池。
    PostgreSQL：进程结构
    天翼云开发者社区
    02-23 680
    本文分享自天翼云开发者社区@《PostgreSQL：进程结构》，作者: 周*******平Postgresql 是一个C/S架构的关系型数据库，由多个后台进程管理数据库，下面分别介绍一些这些进程postgres server process 一个服务器端进程，是所有进程的父进程。该进程管理数据库文件，接受客户端与数据库的连接，且代表客户端对数据库进行操作。该进程的程序名叫做 postgres。backend process 每一个客户端的连接都有一个后端进程存在backgroud processes 为管理
    PostgreSQL 进程结构
    刺客-兰陵王的博客
    11-13 839
    在PG数据库中，对数据进行UPDATE（修改）或者DELETE（删除）操作后，数据库不会立即删除旧版本的数据（Undo），而是标记为删除状态。这是因为PG数据库具有多版本的机制（MVCC），如果这些旧版本的数据正在被另外的事务打开，那么暂时保留他们是很有必要的。当数据提交后，旧版本的数据已经没有价值了，数据库需要清理垃圾数据腾出空间，而清理工作就是AutoVacuum进程进行的。它的意义，也是核心思想就是：先写日志后写数据，既能保证数据不丢失，还降低了读写压力。--> SQL最佳的执行计划。
    PostgreSQL学习笔记 ---- Initdb流程
    你好！我是一名互联网搬砖的菜鸟，我的博客主要记录我在工作和学习过程中积累的项目经验和技术总结。 我希望通过这些文章，能够帮助更多的开发者解决实际问题，提高开发效率。 欢迎大家订阅我的博客，期待与你们的互动和交流！
    07-29 1000
    通过源码走读的方式去探索 postgresql 数据库初始化 initdb 的整个过程。
    PostgreSQL源码学习笔记(1)-文件结构
    爱敲键盘的吉他手
    03-28 676
    PostgreSQL采用C/S(Client-Server)模式，并将客户端称为前端(Frontend)，服务器端称为后端(Backend)。Postgresql是一个跨平台开源且性能良好的关系型数据库，支持标准SQL，多版本并发控制等特性。本人为了增加对数据库原理的认识，特于此地进行记载。bin目录下主要包含了pgsql，initdb等各种工具的代码，而interface里面则存放PostgreSQL的C语言的库libpq。比较核心的代码是backend，bin，interface。
    PostgreSQL源码学习笔记(3)-进程结构
    爱敲键盘的吉他手
    03-28 922
    文章目录引言(Introduction)进程结构Postmaster守护进程初始化内存上下文注册信号处理函数配置参数创建监听套接字辅助进程启动装载客户端认证文件循环等待客户连接请求辅助进程SysLogger系统日志进程BgWriter后台写进程WalWriter预写式日志写进程PgArch预写式日志归档进程AutoVacuum系统自动清理进程PgStat统计数据收集进程Postgres服务进程DML执行流程参考资料(References) 引言(Introduction) 经过前面initdb初始化数据集簇
    【PostgreSQL-9.6.3】进程及体系结构
    Just Do IT
    09-20 1163
    本文主要讲述了PG的几个主要进程，以及PG的核心架构。进程和体系结构详见下图： 从上面的体系结构图可以看出来，PG使用经典的C/S架构，进程架构。在服务器端有主进程、服务进程、子进程、共享内存以及文件存储几大部分，下面着重讲述服务器端的进程部分： 1. Postmaster主进程和服务进程 当PG数据库启动时，首先会启动Postmaster主进程。这个进程是PG数据库
    PostgreSQL进程
    01-23 1416
    PostgreSQL进程 postmaster： 数据库实例的总控进程，负责启动和关闭该数据库实例。用户可以运行postmaster、postgres命令加上合适的参数启动数据库。实际上postmaster命令是一个指向postgres的链接。 当用户与postgresql数据库建立连接时，实际上是先与postmaster进程建立连接，此时，客户端程序会发出身份验证的消息给postmaster主进程，postmaster主进程根据消息中的信息进行客户端身份验证， 如果验证通过，它会fork出一个子进程来为这
    PostgreSQL 进程简介
    HighGO
    03-07 3669
    Pg数据库启动时，会先启动一个叫Postmaster的主进程，然后fork出一些辅助子进程，这些辅助子进程各自负责一部分功能。 主进程Postmaster是整个数据库实例的总控进程，负责启动和关闭数据库实例，事实Postmaster是指向postgre的一个链接： [highgo@hgdb ~]$ which postmaster /data/highgo/4.1.1/bin/postmast
    postgresql进程结构
    06-02 839
    <br />PostgreSQL与Oracle类似，是多进程结构的数据库，各种不同类型的进程相互协作，完成客户端的操作请求，同时保证数据的完整性与一致性。<br /> <br />PostgreSQL数据库中主要有两类进程，第一类是backend进程，第二类是数据库后台进程。Backend进程负责接收和执行客户端发出的命令请求(SQL命令、函数调用等操作)。客户端每发出一个连接请求，数据库都会创建一个新的backend进程来为客户端服务。该backend进程会一直存在，直到客户端主动关闭数据库连接或者遇到异
    PostgreSQL的进程结构
    weixin_33850890的博客
    09-09 195
    PostgreSQL是多程架构的数据库管理系统，在启用SysLogger和PgArch功能后，其进程种类如图1: 　　　　　　　　　　　　　　　　　　　　　　　　　　　　图1 下面简单说明一下图1中各进程： /home/pg/db/bin/postgres -D data: 在PostgreSQL源码中称为Postmaster，它是所有其他进程的父进程； postgres: lo...
    Postgres进程结构和内存结构
    weixin_44847119的博客
    01-28 774
    PostgreSQL数据库启动时,会先启动一个叫做Postmaster的主进程,还会fork一些辅助子进程,这些辅助子进程各自负责一部分功能,辅助子进程分类如下: $ ps -ef | grep postgres postgres 2162 1 0 May23 ? 00:01:01 /usr/local/pgsql/bin/postmaster -D /usr/loc...
    Postgres数据库的进程结构---菜鸟的PG分析之路
    无花禅师的专栏
    07-23 953
    Postgres数据库所有服务进程的入口均位于src/backend/main目录下的main函数，在启动PG数据库的命令行参数中，只要没有指定--single选项，程序都会跳转到PostgresMain所在的分支进行启动；只有当指定了以single模式启动，才会执行PostgresMain分支。程序在进入PostmasterMain分支执行前，会首先对数据库的内存上下文管理进行初始化，具体包括为顶层的TopMemoryContext分配内存空间、将全局变量CurrentMemoryContext指向刚分配
    图解PostgreSQL进程结构和内存结构
    Enmotech的博客
    01-10 801
    点击蓝字关注我们一.建立会话的过程阶段一：客户端发起请求。阶段二：该阶段由主服务postmaster进程负责。服务器是否接受客户端的host通信认证。服务器对客户端进行身份鉴别。PM进程...
    C#读取.csv文件，避免乱码，导入到datatable
    最新发布
    04-25
    <think>好的，我现在需要帮助用户解决在C#中读取CSV文件到DataTable时避免乱码的问题。首先，我得回忆一下用户提供的引用内容，看看有什么可以参考的。用户提到了引用1中的手动读取方法，引用2中的OLEDB方法，引用3的编码设置，还有引用4关于Excel版本的问题，不过CSV可能不需要考虑Excel驱动。 首先，用户的问题是如何避免乱码。乱码通常是因为编码不一致导致的，所以需要确保读取时使用正确的编码。引用1中的代码使用了StreamReader和UTF-8编码，而引用3提到使用GB2312编码导出。所以可能的解决方案包括正确设置读取时的编码，比如UTF-8或者GB2312，具体取决于CSV文件的编码方式。 用户可能不知道CSV文件的具体编码，所以需要指导他们如何确定编码，或者提供通用的方法。例如，使用Encoding.Default可能会根据系统设置来读取，但可能有风险。更好的做法是让用户检查文件的编码，或者在代码中自动检测编码。不过自动检测可能比较复杂，对于新手来说，可能更倾向于直接指定正确的编码。 引用1中的手动读取方法通过逐行处理CSV，分割列并添加到DataTable。这种方法的好处是控制力强，可以处理不同的分隔符，并且容易调整编码。引用2中的OLEDB方法使用了Jet引擎，但可能需要注意驱动是否安装，比如在较新的系统中可能需要安装Access Database Engine，尤其是在64位系统上。此外，引用4提到的ACE.OLEDB问题，可能也需要用户安装相应的驱动，但CSV可能不需要，但需要确认连接字符串是否正确。 所以，解决方案可能有两条路径：手动读取和使用OLEDB。用户需要避免乱码，所以在手动读取时，指定正确的编码是关键。例如，使用StreamReader并传入正确的编码，如UTF-8或GB2312。在引用1中，使用了UTF-8，但可能有些CSV文件是ANSI编码（比如GB2312），这时候需要调整编码参数。 另外，在引用3中，导出时使用了GB2312编码，这说明在读取时如果文件是GB2312，也需要用同样的编码读取。因此，解决方案需要明确指定编码，并可能提供两种方法：手动读取和OLEDB方法，同时处理编码问题。 对于手动读取的方法，步骤大致是：创建DataTable，读取文件流，使用StreamReader指定编码，处理表头，然后逐行读取数据。需要注意分割符的正确性，比如用户代码中使用的是空格分隔符，但CSV通常是逗号分隔，可能需要用户根据实际情况调整。 对于OLEDB方法，连接字符串中的CharacterSet设置可能影响编码，比如在引用2中设置为UNICODE，这可能需要确认是否正确。另外，OLEDB读取可能更简便，但需要依赖系统组件，可能在部署时需要注意。 总结，给出两种方法，并强调编码设置的重要性。同时提醒用户根据CSV的实际编码调整StreamReader的编码参数，或检查OLEDB连接字符串的CharacterSet。此外，处理可能的异常，比如文件不存在，或者权限问题，但用户主要关心乱码，所以重点在编码部分。 最后，生成相关问题，可能涉及其他编码问题、处理复杂CSV结构（如包含引号或换行符）、性能优化等。</think>以下是如何在C#中读取CSV文件并避免乱码的两种解决方案，结合代码实现和关键注意事项： --- ### **方案一：手动逐行读取（推荐灵活控制）** ```csharp public DataTable ReadCsvToDataTable(string filePath, Encoding encoding) { DataTable dt = new DataTable(); string[] separators = { "," }; //根据实际分隔符调整，例如制表符用"\t" using (FileStream fs = new FileStream(filePath, FileMode.Open, FileAccess.Read)) { using (StreamReader sr = new StreamReader(fs, encoding)) //关键编码设置 { //读取表头 string headerLine = sr.ReadLine(); if (headerLine != null) { string[] headers = headerLine.Split(separators, StringSplitOptions.RemoveEmptyEntries); foreach (string header in headers) { dt.Columns.Add(new DataColumn(header.Trim())); } } //逐行读取数据 while (!sr.EndOfStream) { string dataLine = sr.ReadLine(); string[] rowData = dataLine.Split(separators, StringSplitOptions.None); dt.Rows.Add(rowData.Select(x => x.Trim()).ToArray()); //去空格 } } } return dt; } ``` #### **调用示例** ```csharp //若文件编码为UTF-8 DataTable dt1 = ReadCsvToDataTable("data.csv", Encoding.UTF8); //若文件编码为GB2312（常见于Windows系统生成的CSV） DataTable dt2 = ReadCsvToDataTable("data.csv", Encoding.GetEncoding("GB2312")); ``` --- ### **方案二：使用OLEDB引擎（需安装驱动）** ```csharp public DataTable ReadCsvByOleDb(string filePath, string fileName) { string connectionString = $@"Provider=Microsoft.ACE.OLEDB.12.0; Data Source={Path.GetDirectoryName(filePath)}; Extended Properties='Text;HDR=Yes;FMT=Delimited;CharacterSet=65001;'"; //65001对应UTF-8 using (OleDbConnection conn = new OleDbConnection(connectionString)) { conn.Open(); OleDbDataAdapter adapter = new OleDbDataAdapter($"SELECT * FROM {fileName}", conn); DataTable dt = new DataTable(); adapter.Fill(dt); return dt; } } ``` #### **注意事项** 1. **编码设置** - 手动读取方案通过`StreamReader`的编码参数直接控制（如`Encoding.UTF8`或`GB2312`）[^1][^3] - OLEDB方案通过`CharacterSet=65001`指定UTF-8编码，若要使用GBK可改为`CharacterSet=936` 2. **依赖组件** - OLEDB方案需安装[Microsoft Access Database Engine](https://www.microsoft.com/en-us/download/details.aspx?id=54920)，尤其是64位系统[^4] --- ### **避免乱码的核心步骤** 1. **确认文件实际编码** - 用记事本打开CSV → 另存为 → 查看"编码"下拉框中的默认选项 2. **统一编码配置** - 读取时使用的编码必须与文件保存的编码一致 3. **特殊字符处理** - 若数据含逗号或换行符，需用双引号包裹字段（可通过正则表达式增强解析逻辑） ---
    评论
    添加红包

    请填写红包祝福语或标题

    个

    红包个数最小为10个

    元

    红包金额最低5元

    当前余额3.43元 前往充值 >
    需支付：10.00元
    成就一亿技术人!
    领取后你会自动成为博主和红包主的粉丝 规则
    hope_wisdom
    发出的红包

    打赏作者

    aSimpleSheep

    你的鼓励将是我创作的最大动力

    ¥1 ¥2 ¥4 ¥6 ¥10 ¥20
    扫码支付：¥1
    获取中
    扫码支付

    您的余额不足，请更换扫码支付或充值

    打赏作者

    实付元
    使用余额支付
    点击重新获取
    扫码支付
    钱包余额 0

    抵扣说明：

    1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
    2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

    余额充值