Linux 内核中的 I/O 调度：从页缓存脏页回写到 cgroups 资源限制原理
作为一名深耕操作系统和嵌入式开发的工程师，我深知磁盘 I/O 子系统在整体系统性能中的关键地位。在系统开发中，良好的 I/O 调度可以提高系统的吞吐量和响应速度。在 Linux 内核中，页缓存（Page Cache）与脏页回写（Dirty Page Writeback）是一个核心机制。今天，我们就来深入探讨 Linux cgroups 资源限制原理，从技术原理到实战应用。
页缓存与脏页回写机制
Linux 内核为了提升磁盘访问效率，会将频繁访问的文件数据缓存在内存中，这部分内存被称为页缓存。当应用程序写入数据时，数据首先被写入页缓存，此时这些数据被称为“脏页”（Dirty Pages）。内核会在后台通过写回线程（如 pdflush 或 writeback 线程）将这些脏页异步刷入磁盘。
内核通过 struct bdi_writeback 结构体来管理每个Backing Device Info 的回写状态。
struct bdi_writeback {
struct list_head bdi_list;
struct super_block *sb;
unsigned long dirty_exceeded;
unsigned long dirty_pages;
unsigned long dirty_time;
// 其他回写控制字段
};
cgroups blkio 控制器原理
控制组（cgroups）是 Linux 内核的一个子系统，用于限制、记录和隔离进程组所使用的物理资源。其中，blkio 控制器专门用于限制块设备 I/O 的带宽和 IOPS。
当启用 cgroups blkio 限制时，内核会在 I/O 请求提交到调度器之前进行拦截和计数。如果某个 cgroup 的 I/O 使用量超过了设定的配额，内核会阻塞该 cgroup 内的进程，直到配额恢复。
struct blkio_group {
struct cgroup_subsys_state css;
struct request_queue *q;
struct blkio_group_stats stats;
struct blkio_throttle_data throttle;
// 关联的 I/O 统计数据结构
};
从创业者的角度来看，Linux 内核资源限制的设计思路与企业管理中的资源分配有着密切的联系。
实用技巧
使用场景
最佳实践
代码示例
以下是一个简单的 Linux 内核模块示例，用于打印当前系统的页缓存和脏页统计信息，配合用户空间的 cgroups 配置脚本使用。
#include <linux/module.h>
#include <linux/kernel.h>
#include <linux/init.h>
#include <linux/mm.h>
#include <linux/blkdev.h>
static int __init io_monitor_init(void) {
unsigned long dirty_pages = global_page_state(NR_FILE_DIRTY);
unsigned long total_pages = totalram_pages();
unsigned long dirty_ratio = (dirty_pages * 100) / total_pages;
printk(KERN_INFO "IO Monitor: Dirty Pages = %lu\\n", dirty_pages);
printk(KERN_INFO "IO Monitor: Total Pages = %lu\\n", total_pages);
printk(KERN_INFO "IO Monitor: Dirty Ratio = %lu%%\\n", dirty_ratio);
// 模拟加载 cgroups blkio 信息
printk(KERN_INFO "IO Monitor: blkio controller loaded\\n");
return 0;
}
static void __exit io_monitor_exit(void) {
printk(KERN_INFO "IO Monitor: Module unloaded\\n");
}
module_init(io_monitor_init);
module_exit(io_monitor_exit);
MODULE_LICENSE("GPL");
MODULE_AUTHOR("Xu Jing");
MODULE_DESCRIPTION("A simple module to monitor page cache dirty status");
在用户空间，我们需要通过 bash 命令配置 cgroups 来限制特定进程的 I/O。
#!/bin/bash
# setup_cgroups_io.sh
# 创建 cgroup 目录
cgcreate -g blkio:/io_limiter
# 设置块设备 I/O 权重 (假设设备为 /dev/sda)
# 权重范围 10-1000，默认 500
echo "8:0 500" > /sys/fs/cgroup/blkio/io_limiter/blkio.weight
# 设置读取带宽限制 (例如 10MB/s)
# 格式: major:minor bytes_per_second
echo "8:0 10485760" > /sys/fs/cgroup/blkio/io_limiter/blkio.throttle.read_bps_device
# 设置写入带宽限制 (例如 5MB/s)
echo "8:0 5242880" > /sys/fs/cgroup/blkio/io_limiter/blkio.throttle.write_bps_device
# 启动一个测试进程并放入 cgroup
# cgexec -g blkio:io_limiter dd if=/dev/zero of=/tmp/testfile bs=1M count=100
echo "Cgroups IO limits configured for /dev/sda"
工作也要流程化，cgroups 就像是系统中的资源管家，它确保了每个进程都能公平地获得磁盘 I/O 资源。在实际应用中，我们需要深入理解页缓存的脏页回写机制，以实现系统的最佳性能和可靠性。这就是生机所在，通过深入理解和应用 Linux 内核 I/O 调优技术，我们不仅可以构建更高效、更可靠的系统，也可以从中汲取企业管理的智慧，为创业之路增添一份技术的力量。
