news 2026/4/23 13:10:10

PostgreSQL 中的“脏页(Dirty Pages)”是什么?

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
PostgreSQL 中的“脏页(Dirty Pages)”是什么?

PostgreSQL 以固定大小的数据块(Page)存储数据,默认大小为 8 KB。当客户端执行更新或插入操作时,PostgreSQL 并不会立即将变更写入磁盘,而是先将相关数据页加载到共享内存(Shared Buffers)中,在内存中完成修改,并将该页面标记为“脏页”。所谓“脏页”,是指内存中的页面版本已经新于磁盘上的对应版本。

在向客户端返回操作结果之前,PostgreSQL 会先将变更记录写入预写日志(Write-Ahead Log,WAL),以保证即使数据库发生崩溃也能恢复数据一致性。但实际的数据文件并不会立刻更新,只有在检查点(Checkpoint)触发或后台写进程执行刷新时,脏页才会被写回磁盘。

在此之前,脏页会持续累积在内存中,直到通过以下三种机制之一被刷新:

  • 后台写进程(Background WriterBGWriter):一个常驻后台进程,在可用的干净缓冲区数量下降时,持续将脏页写入磁盘。
  • 检查点进程(Checkpointer):在触发检查点时(如达到checkpoint_timeout或 WAL 超过max_wal_size),将所有脏页刷新到磁盘。
  • 后端进程(Backend):在紧急情况下(如共享缓冲区几乎全部为脏页),普通后端进程会自行写脏页,可能导致用户查询阻塞。

理解并合理控制脏页的刷新时机与方式,是优化 PostgreSQL 性能的关键。

脏页为何影响性能

脏页会从多个方面影响数据库性能:

1. 检查点期间的 I/O 峰值

检查点发生时,所有脏页都必须被刷新到磁盘。如果脏页数量较多,会在短时间内产生大量磁盘 I/O,影响其他查询性能。checkpoint_timeoutcheckpoint_completion_targetmax_wal_size等参数决定了检查点触发的频率以及刷新脏页的节奏。

2. 后端写入带来的查询阻塞

当共享缓冲区被大量脏页占满,而 BGWriter 无法及时清理时,后端进程将被迫自行写盘,直接阻塞正在执行的用户查询。为避免此类情况,应通过合理的内存与刷新参数配置,让 BGWriter 承担绝大多数写入工作。实践中通常包括:

  • shared_buffers分配足够内存;
  • 调整bgwriter_delaybgwriter_lru_maxpagesbgwriter_lru_multiplierbgwriter_flush_after等参数,使脏页持续、平稳地写入磁盘;
  • 通过增大checkpoint_timeout、提高checkpoint_completion_target以及增大max_wal_size,减少检查点引发的突发写入。

3. 吞吐量与崩溃恢复时间的权衡

较少的刷新频率(如较大的checkpoint_timeout)可以降低 I/O 开销,但会增加数据库崩溃后需要回放的 WAL 数量;更频繁的刷新可以加快恢复速度,但可能降低运行时性能。合理的参数配置需要根据实际业务负载在两者之间取得平衡。

PostgreSQL 管理脏页的核心机制

后台写进程(Background Writer,BGWriter)

BGWriter 是一个独立进程,其目标是在后台持续写出脏页,保持一定数量的干净缓冲区可用。根据官方文档描述:

  • 当共享缓冲区中可用的干净页面数量低于阈值时,BGWriter 会写出部分脏页并将其标记为干净。
  • 若同一页面在一个检查点周期内被多次修改,可能会被多次写盘,从而增加总体 I/O。

BGWriter 的主要配置参数(位于postgresql.conf)包括:

调优建议:

如果在pg_stat_bgwriter中观察到后端进程写盘较多,应适当提高bgwriter_lru_maxpagesbgwriter_lru_multiplier;若 BGWriter 本身导致 I/O 过高,则可适当降低相关参数。通过调整bgwriter_delay,在写入频率与 CPU 开销之间取得平衡。

检查点(Checkpointer)

检查点触发时,PostgreSQL 会将所有脏页写入磁盘,并在 WAL 中记录检查点位置。合理调整检查点参数有助于平滑 I/O 压力:

通过增大checkpoint_timeoutcheckpoint_completion_target,可以将写入分散到更长时间窗口内;max_wal_size决定了自动检查点的触发时机,从而间接影响脏页刷新频率。

共享缓冲区(Shared Buffers)

shared_buffers决定了 PostgreSQL 可用于缓存数据页和存放脏页的内存大小。该参数直接影响页面在内存中的停留时间以及写盘频率。

在专用数据库服务器上,通常建议将其设置为物理内存的 25%~ 40%。当shared_buffers较大时,往往需要相应提高max_wal_size,以避免检查点过于频繁。

shared_buffers 过小会导致脏页频繁被淘汰,引发后端写盘;设置过大则可能在检查点时一次性刷新大量页面,造成 I/O 峰值。合理的 shared_buffers 配合 BGWriter 调优,可以显著减少后端写入。

自动清理(Autovacuum) 与 冻结清理(Vacuum Freeze)

自动清理(Autovacuum)在更新可见性信息或冻结元组(Freeze)时,也会产生脏页。应确保 Autovacuum 运行频率足以防止表膨胀,但又不过于激进,以免产生不必要的写入。可根据业务负载调整autovacuum_vacuum_cost_limitautovacuum_vacuum_scale_factor。在 SSD 环境下,适当提高 Autovacuum 强度通常是有益的。

面向性能的调优实践

1. 先监控,再调优

通过pg_stat_bgwriter重点关注以下指标:

  • buffers_checkpoint:检查点写出的脏页数量。
  • buffers_clean:BGWriter 写出的页面数量。
  • buffers_backend:后端进程写出的页面数量。

目标是将buffers_backend控制在接近 0 的水平。

2. 合理配置共享缓冲区大小

以物理内存的 25% 作为起点,根据负载特征调整:

  • 若业务场景以读操作为主,可适当增大共享缓冲区。
  • 若写操作导致检查点产生大幅性能波动,则需调小共享缓冲区。

3. 调整 BGWriter 参数

  • 降低bgwriter_delay参数值(如设置为 100 毫秒),提高后台写入器的唤醒频率。
  • 针对高写入负载场景,增大bgwriter_lru_maxpages(建议取值范围 200–1000)与bgwriter_lru_multiplier(建议取值范围 3–4)参数,提升单次周期内的脏页处理能力。
  • bgwriter_flush_after参数设为与存储系统最佳写入粒度匹配的值;对于固态硬盘,512KB–1MB 为推荐取值区间。

4. 优化检查点行为

  • 增大checkpoint_timeout参数,降低检查点触发频率(建议取值范围 15–60 分钟)。
  • checkpoint_completion_target参数提升至 0.7–0.9,使检查点的写入操作均匀分布。
  • 增大 max_wal_size 参数,避免检查点被过度频繁触发。

5. 避免后端写入

buffers_backend持续增长时,应优先增加 shared_buffers 或增强 BGWriter 的写盘能力。后端写盘往往是查询延迟的主要来源。

6. 操作系统层面优化

  • Linux 系统中,应避免vm.dirty_background_ratiovm.dirty_ratio设置过高,以免内核长时间累积脏页,造成突发写回。
  • 关闭透明大页(THP),并在内存充足的服务器上启用静态大页(Huge Pages),以提升整体性能。

7. 持续评估与迭代

不同业务负载差异较大,应结合pg_stat_activitypg_stat_bgwriter以及 PostgreSQL 17 引入的pg_stat_io等视图,持续评估调优效果,并逐步调整参数。

总结

“脏页”本质上是 PostgreSQL 内存中等待写回磁盘的已修改数据页。通过脏页机制,PostgreSQL 能够合并写入操作,并借助 WAL 保证崩溃安全性。但如果相关参数配置不当,脏页处理可能引发 I/O 峰值和查询延迟。

深入理解共享缓冲区、后台写进程、检查点与 WAL 的协同机制,并合理调优bgwriter_delaybgwriter_lru_maxpagesbgwriter_lru_multipliercheckpoint_timeoutshared_buffers等关键参数,有助于在保障数据可靠性的同时,实现平稳、可预测的数据库性能。

原文链接:

https://stormatics.tech/blogs/what-are-dirty-pages-in-postgresql

作者:Umair Shahid

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/23 12:10:14

从零开始部署物联网系统:手把手教你搭建可扩展的云边协同架构

第一章:物联网系统部署概述物联网系统部署是将感知设备、网络通信、数据处理与应用服务有机结合的过程,旨在实现物理世界与数字世界的高效连接。该过程不仅涉及硬件设备的安装与配置,还包括软件平台的搭建、数据流的管理以及安全机制的实施。…

作者头像 李华
网站建设 2026/4/23 10:43:59

11、计算机内存、I/O 操作与 8086 中断详解

计算机内存、I/O 操作与 8086 中断详解 一、计算机内存分配 在一些软件(如微软 Windows 95)中,软件可寻址高达 4GB 的物理内存,地址范围从 00000000h 到 FFFFFFFFh。下面是典型的 PC 内存分配表: 地址范围 设备 00000h–00FFFh 中断向量 00400h–0047Fh ROM BIOS …

作者头像 李华
网站建设 2026/4/23 10:45:09

17、深入探索 HTML 高级特性与 JavaScript

深入探索 HTML 高级特性与 JavaScript 1. HTML 高级特性概述 HTML 与编译型语言(如 C 和 Pascal)不同,HTML 文本文件由解释器(浏览器)解释执行,而 C 和 Pascal 等语言在运行前必须进行预编译。这种特性使得 HTML 具有跨操作系统、浏览器类型和计算机类型的优势,因为 H…

作者头像 李华
网站建设 2026/4/23 10:48:52

ChatOps 的消亡与重生:为什么它是网络自动化的最后一道安全阀?

ChatOps 的消亡与重生:为什么它是网络自动化的最后一道安全阀?在网络工程的语境下,“ChatOps”是一个被严重低估,甚至被长期误解的概念。当你走进任何一个正在处理重大网络事故的“作战室(War Room)”&…

作者头像 李华
网站建设 2026/4/23 11:51:25

如何用GraphQL自动生成PHP接口文档?这7个工具你必须掌握

第一章:GraphQL 的 PHP 接口文档GraphQL 是一种用于 API 的查询语言,允许客户端精确请求所需数据。在 PHP 环境中,通过使用如 webonyx/graphql-php 这类库,开发者可以快速构建强类型的 GraphQL 接口,并生成可交互的文档…

作者头像 李华